首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏布衣者博客

    LeetCode-题库-刷题(6-7)

    将一个给定字符串 s 根据给定的行数 numRows ,以从上往下、从左到右进行 Z 字形排列。 具体题目链接

    52320发布于 2021-09-07
  • 来自专栏linjinhe的专栏

    设计数据密集型应用(6-7):分片、事务

    分片 假设我们有一个单机数据库,上面有三张表:用户表、商品表和订单表。 ? 无分片 业务刚起步的时候,数据量很少,这个只有三张表的数据库运行得很好。 ? 垂直分片 随着业务发展,用户数量、商品数量、订单数量都在持续增长,数据库的负载越来越高。我们开始对数据库进行垂直拆分(垂直分片),把这三张表拆到三个数据库,而业务代码改改数据库的配置就好。 ? 再后来,一个数据库也承载不了用户表的数据,需要对用户表进行水平拆分(水平分片)。比如,根据用户 ID 将数据哈希到 n 个数据库。 比如,如果 key 是单调递增的,那所有插入数据都会集中在最后一个分片。这个分片的数据插入速度会成为插入性能的瓶颈。单调递增的 key 在关系数据库领域是非常常见的。 对单副本的数据库来说,持久性的意思是数据被写入外存,比如 HDD 或 SSD。对多副本的数据库来说,持久性意味着数据以及成功复制到其它节点。

    84750发布于 2020-04-02
  • 来自专栏python3

    笨办法学Python - 习题6-7:

    Process finished with exit code 0 上面的代码主要是有几个点需要注意下: 占位符的问题,%d 代表整数,%s 代表字符串,数据类型必须要匹配 %r 和 %s 的区别和联系

    78510发布于 2020-02-10
  • 来自专栏iOS面试

    iOS 面试策略之算法基础6-7节

    数据溢出:因为动态规划是一种由简至繁的过程,其中积蓄的数据很有可能超过系统 当前数据类型的最大值,从而导致程序抛出异常。 这两点,我们在上面这道求解斐波拉契数列第100个数的题目就都遇到了。 实际上 F(40) 就已经突破一亿,F(100) 一定会造成整型数据溢出。 当然对于这两点我们也有相应的解决方法。 对付栈溢出,我们可以把递归写成循环的形式(所有的递归都可改写成循环);对付数据溢出,我们可以在程序每次计算中,加入数据溢出的检测,适时终止计算,抛出异常。

    96830发布于 2021-04-22
  • 来自专栏AI SPPECH

    IO竞赛2025年题目解析:中级难度(6-7)

    2025年的中级难度(难度系数6-7)题目综合考察了选手的算法设计、数据结构应用、数学建模和问题分析能力。本文将深入解析2025年中级难度的IO竞赛题目,帮助选手们突破瓶颈,提升解题能力。 难度进阶路径: 入门(1-3) → 基础(4-5) → 中级(6-7) → 高级(8-10) 难度系数 考察重点 核心知识点 学习目标 6-7 高级算法、数据结构综合应用 高级动态规划、图论、数论、几何 7,这一阶段的题目开始考察更高级的算法和数据结构的综合应用。 问题建模难度增加,需要将实际问题转化为算法模型 数据结构的选择和实现更加复杂 代码量增加,对代码的正确性和效率要求更高 往往需要结合多种算法和数据结构来解决问题 第二章:难度系数6题目解析 难度系数6 的题目是中级难度的基础,开始涉及更复杂的算法设计和数据结构应用。

    39110编辑于 2025-11-13
  • 来自专栏AI机器学习与深度学习算法

    机器学习入门 6-7 sklearn中的随机梯度下降法

    在jupyter调用我们自己封装的随机梯度下降法,首先是先在虚拟数据上验证算法正确性,然后应用真实的数据。 ? ? ? ? ? ? 二 sklearn实现随机梯度下降法 ? ?

    1.3K20发布于 2019-11-13
  • 来自专栏全栈开发那些事

    6-7 在一个数组中实现两个堆栈 (20分)

    其中Tag是堆栈编号,取1或2;MaxSize堆栈数组的规模;Stack结构定义如下:

    1.3K40编辑于 2023-02-27
  • 来自专栏企鹅号快讯

    AI需要大数据,而大数据也需要AI

    美国知名AI作家Bernard Marr 说过:“过去,由于有限的数据集、非实时的数据和无法在数秒内分析大量数据,而导致AI发展受阻。 今天,可以实时访问数据和工具,实现快速分析,从而推动了AI和机器学习,并允许向数据优先的方法过渡。我们的技术现在已经足够灵活,可以访问这些庞大的数据集,以快速推进AI和机器学习应用程序。” AI和大数据形成了一种真正的共生关系,彼此需要。 然而,Manchett警告说,AI尚不足以满足非技术业务的需求。“为了实现大数据和AI的目标,你仍然需要理解提取、转换和加载的概念,以及机器学习是什么,可以做什么。” 数据占据了中心位置。 “通过云计算,任何人都可以轻而易举地获得数据,大数据和AI的可能性在我们的生活中变得越来越真实。”然后,AI和机器学习将变得司空见惯。

    904100发布于 2018-01-18
  • 亲测3款热门AI视频工具|Grok、剪映数字人、即梦AI,新手也能轻松出片

    最近因工作需要,小编尝试用了几款AI软件做视频。今天小编就把亲测的3款宝藏AI视频工具分享给你,帮你选对工具 无广纯分享,建议收藏备用,直接上干货! 还能结合人物特色,增加局部细节 效率超高:10-15秒就能生成6-7秒短视频,赶工不等待。 ❌ 明显短板: 配音难:人声处理生硬,新手难配出贴合视频的声音,主观性强。 时长受限:仅能生成6-7秒短视频,局限性较大。 最后总结|3款工具精准匹配指南 ✅ 免费快速出漫画短视频 → Grok ✅ 便捷配音做口播 → 剪映数字人 ✅ 高质量中文创意视频 → 即梦AI 没有完美的AI工具,只有最适合自己的! 三者搭配使用,新手也能轻松做出质感视频~ 平时用什么AI视频工具?欢迎在评论区分享你的宝藏工具!

    1.6K10编辑于 2026-07-13
  • 来自专栏ATYUN订阅号

    【观点】AI需要大数据,而大数据也需要AI

    AI和大数据已经形成了一种真正的共生关系,彼此需要相得益彰。 美国知名AI作家Bernard Marr 说过:“过去,由于有限的数据集、非实时的数据和无法在数秒内分析大量数据,而导致AI发展受阻。 今天,可以实时访问数据和工具,实现快速分析,从而推动了AI和机器学习,并允许向数据优先的方法过渡。我们的技术现在已经足够灵活,可以访问这些庞大的数据集,以快速推进AI和机器学习应用程序。” AI和大数据形成了一种真正的共生关系,彼此需要。 “通过云计算,任何人都可以轻而易举地获得数据,大数据和AI的可能性在我们的生活中变得越来越真实。”然后,AI和机器学习将变得司空见惯。

    59870发布于 2018-03-06
  • 来自专栏AI系统

    【AI系统】数据并行

    数据并行是一种广泛应用于分布式 AI 系统中的技术,旨在通过将数据集划分为多个子集并在不同计算节点上并行处理这些子集,以提高计算效率和速度。 分布式数据并行 DDP分布式数据并行(Distributed Data Parallel, DDP)是数据并行的一种高级形式,它综合了多种优化,是当前应用最广的并行算法之一,通常用于大型 NPU AI 集群和 AI 系统中。 在通信的同时也会继续计算梯度,这样就无需等待所有计算完成后再集中进行通信,也不必在计算完成后等待通信完成,从而将通信过程覆盖到计算时间内,充分利用 AI 集群,提高了 AI 集群使用率。 DDP 反向传播中计算与通信的重叠导致无需等待所有计算完成后再集中进行通信,也不必在计算完成后等待通信完成,提高了 AI 集群的使用率。

    1.3K10编辑于 2024-12-07
  • 来自专栏技术墨客

    从数据到AI

    一篇关于數據倉庫建設、人工數據分析、AI數據分析的讲义 數據Data&信息Information 信息 信息是一個客觀存在物體的自然表現,比如說“I am a local villain.” 隨著數據的不斷累積和堆積在數據背後發現了驚人的統計規律,隨著這些統計規律的發展漸漸的出現了AI分析和數據分析。 數據&數據分析&AI 如下圖是建立數據分析工程的過程 ? 根據需要訓練AI模型。 數據倉庫的建立 聯機事物型系統&決策分析系統 在數據能力上,通常將系統的數據結構模型分為2類,聯機事物型、決策分析型。 數據倉庫案例展示superset 地址:http://192.168.0.212:8088 賬號:admin 密碼:admin 數據分析到AI訓練 進過大量的數據演練,可以逐漸的發現數據背後的統計規律。

    1K50发布于 2019-11-21
  • AI Agent + 数据工程

    一位在数据领域深耕多年的创业者告诉我,早期AI在数据工程领域的切入点其实很务实——那些原本需要大量人工的数据治理工作,恰恰是大模型最擅长的地方。 比如从海量数据中提炼关键信息、自动生成数据文档、识别重复和冗余的表结构。这些事情以前要靠专人花时间梳理,现在AI可以快速完成。 但这只是第一步。 更深层的变化在于,数据工程的需求本身正在被AI重塑。 以前的交付物很明确:一张张处理好的数据表,加上一个Dashboard,业务方看数据就够了。 现在呢?业务方不仅看Dashboard,还想直接跟数据对话——问AI一个问题,AI直接给出答案。 好的数据工程,应该配合AI在事中就做好管理和体系搭建。” 这句话背后是一个残酷的现实:以前数据工程师的工作更像是管道工——把数据从A搬到B,分层、清洗、汇总。 现在的要求变成了规划师——不仅要搬数据,还要让数据能被AI正确理解和调用。 这需要的不仅是技术能力,更是思维方式的转变。

    42910编辑于 2026-02-28
  • 来自专栏MixLab科技+设计实验室

    真相(Zhenxiang): 用真相帮生活过滤

    作品名称:真相(Zhenxiang)Slogan: 用真相帮生活过滤 项目背景:这是一个由0编程基础的学员,在经过线下2天的AI编程学习后,在3小时的黑客松(Hackathon)比赛中独立开发完成的MVP 它充分展示了普通人在掌握AI编程能力后,如何快速将个人的深度思考转化为实际落地的软件产品。 核心痛点与洞察:作者观察到两个关键的人群过渡期: 6-7岁儿童: 从家庭进入学校的社会化过程。 AI赋能: 题目不是死板的数据库,而是由AI实时生成(System Prompt),判断对错及解析也由AI完成,实现了题目的无限性和解析的智能性。 它跳出了简单的工具范畴,利用AI技术去解决人类思维和教育层面的深层问题,是一个非常典型的“人文思考+AI技术”的结合案例。

    17310编辑于 2026-03-25
  • 来自专栏EasyNVR

    海康、大华RTSP/Onvif安防摄像头网页无插件直播流媒体服务器方案之Arm版本的NVR一直无法登录到配置界面如何解决?

    基于AI视频智能分析云终端 EasyNVR智能云终端是基于视频智能传输技术、视频AI分析技术、智能云组网技术、边缘计算技术、视频大数据技术、窄带通信技术、远程监测技术以及智能语音融合等多种技术于一体,研究一种提供视频流上云 、存储、转发、视频AI功能的云终端产品,旨在帮助视频设备厂商、方案商与服务提供商,快速将存量或者新增的监控设备上云。 通过测试:添加6-7通道左右后,就无法再添加通道,空间不足 问题解决 此时,通过EasyTool工具重置设备解决。 ?

    1.1K10发布于 2020-04-23
  • 来自专栏亨利笔记

    国庆假期免费观看VMworld 2021线上大会

    一年一度的 VMworld 将于 10 月 6-7 日(亚洲时区)开幕,VMware将展示最新技术成果和新产品。本次大会采用线上虚拟形式,全球用户均可免费观看大部分的内容。 相关文章: 使用Bitfusion在K8s上共享GPU资源 没错,AI原生云GPU算力圈的"super爱豆"就是他 在主会场的主题演讲上,我们还会演示最新的基于VCF/TKG的云原生联邦学习解决方案, 相关文章: 云原生技术赋能联邦学习 联邦学习:保护隐私安全以及克服数据孤岛的机器学习 ---- 要想了解云原生、机器学习和区块链等技术原理,请立即长按以下二维码,关注本公众号亨利笔记 ( henglibiji

    31020编辑于 2023-04-04
  • openEuler 高效 AI 数据管道

    开篇介绍AI训练的瓶颈往往不是模型计算,而是数据预处理。openEuler提供高效的数据处理管道,支持并行加载、GPU预处理、数据增强等优化。今天聊聊如何加速AI数据处理。 数据处理优化:多进程DataLoader并行加载提升5-10倍,DALIGPU预处理释放CPU,预取机制减少等待时间,数据缓存避免重复读取。 存储优化:NVMeSSD提升I/O吞吐,分布式文件系统支持大规模数据集,数据格式优化TFRecord/Parquet提升读取效率。 QPS提升40%,Web服务器并发提升50%,大数据任务快35%。 优化要基于数据驱动,每次都要测试对比,确保有效且稳定。

    40110编辑于 2025-12-03
  • 来自专栏AI

    AI中的数据存储

    流水线中的数据存储类型和量级 图片 每个AI流水线中都涉及到数据存储 数据源-数据提取过程中涉及到: PB级别的顺序写 数据准备过程中: TB级别的顺序读 模型训练过程中: GB级别的随机读 检查点和恢复过程中 中间采用高性能全闪存,通过是TLC, 弥补机械盘性能, 总容量比HDD少 右边采用对象存储, 存储集群或JBODS, 包含大量机械盘, 总容量占比高 AI集群中的数据移动 图片 1.数据采集阶段,原始数据按顺序写入对象存储层 RAG 还可以创建额外的 I/O 活动 5.归档流程: 模型输入和输出被捕获并写入对象存储层的磁盘 旨在优化 AI 存储效率的产品组合 QLC 提升新型 AI DC(数据中心) 构建的电源效率 每个 DGX 有关建模详细信息,请参阅附录“QLC 功率效率与 HDD” 模型训练与数据存储 AI 数据穿越存储层之旅 最近的检查点基本在SSD上 早期的检查点数据在HDDS AI数据量级和性能 检查点:提高存储容量和吞吐量 Blob 存储层一次性访问可实现高吞吐量 AI负载中的存储扩展性 总结 AI集群流程中的数据存储需要根据实际业务的量级和性能要求做分层存储, 这样成本可控且性能满足需求 AI行业也会带动存储行业发展,

    2K11编辑于 2024-09-18
  • 转载:【AI系统】数据并行

    数据并行是一种广泛应用于分布式 AI 系统中的技术,旨在通过将数据集划分为多个子集并在不同计算节点上并行处理这些子集,以提高计算效率和速度。 分布式数据并行 DDP分布式数据并行(Distributed Data Parallel, DDP)是数据并行的一种高级形式,它综合了多种优化,是当前应用最广的并行算法之一,通常用于大型 NPU AI 集群和 AI 系统中。 在通信的同时也会继续计算梯度,这样就无需等待所有计算完成后再集中进行通信,也不必在计算完成后等待通信完成,从而将通信过程覆盖到计算时间内,充分利用 AI 集群,提高了 AI 集群使用率。 DDP 反向传播中计算与通信的重叠导致无需等待所有计算完成后再集中进行通信,也不必在计算完成后等待通信完成,提高了 AI 集群的使用率。

    62510编辑于 2024-12-13
  • AI+Data:AI时代的企业数据治理

    随着AI应用对多源异构数据的需求增加,企业对于非结构化数据的价值化需求也在加速释放,而相应的数据治理模块也将获得进一步的关注与优化。 对于部署AI应用的企业来说,数据资源的质量直接决定了AI应用能否成功落地。因此,在推进AI应用的过程中,开展针对性的数据治理工作是首要且必要的步骤。 AI模型对数据高度敏感,低质量的数据会导致“garbage in, garbage out”的问题,即输入数据的缺陷会直接影响到输出结果的质量。 为了确保AI模型的有效性和准确性,必须保证数据的完备性和准确性。有效的数据治理不仅可以为AI模型提供高质量的数据原料,还能提高模型的拟合效果,进而增强AI应用的实际性能。 在金融、医疗、零售、工业以及互联网等数据基础建设较好的行业中,面向AI时代的数据治理正在逐步显现其优势。

    1.4K10编辑于 2025-01-03
领券