首页
学习
活动
专区
圈层
工具
发布

#spark

Apache Spark是一个开源集群运算框架,Spark使用了存储器内运算技术,能在数据尚未写入硬盘时即在存储器内分析运算。

用 NCCL 检查 2 台 DGX Spark 协同合作

GPUS Lady

前面《 小白教程:两台 NVIDIA GB10 系统如何互联》已经带着大家用 QSFP 网线连接两台 DGX Spark 设备,本文就进一步用 NVIDIA 的...

500

国内首个生产级Spark+Ray智能数据湖平台来了!

腾讯QQ大数据

传统"数据平台 + AI 平台"的两套架构,让数据在搬运中流失价值、让运维成本随规模指数增长。Agent 需要的不是更多的管道,而是一块能让数据与 AI 计算原...

1100

用QSFP连接两台DGX Spark协同工作

用户4730701

这里同样有两种方式,熟悉 SSH 的人可以自己手动处理,不熟悉的可以使用 discover-sparks 工具来处理,都很简单

14700

数据倾斜导致 Spark 作业慢?从原理到优化的完整攻略

gavin1024

摘要: Spark 作业执行缓慢,数据倾斜是常见原因。本文介绍数据倾斜的产生原理、识别方法,以及提高并行度、两阶段聚合、广播连接、 AQE 自适应执行和 RSS...

16510

快手 AB 场景提速 145 倍,从 Spark 到 Apache Doris 的加速实践

SelectDB技术团队

导读:快手 AB 指标生产场景从 Spark 切换到 Doris 提速 145 倍、资源消耗下降 72%,并刷新了 Doris 单机群最大规模:2000 节点、...

13400

XR AI重磅上线!可基于DGX Spark部署,Agentic AI解锁实时多模态XR智能交互

GPUS Lady

随着扩展现实(XR)硬件持续轻量化普及、云端实时渲染技术日趋成熟,传统XR应用的交互短板愈发凸显:以往依托指令式语音交互、固定界面触控操作的模式,无法适配虚实融...

13700

为彻底讲透 Spark 开窗,我用 Claude 自研可视化工具,全网独有逐帧拆解Frame区间

数据仓库晨曦

深耕数仓与SparkSQL开发多年,窗口函数一直是新人入门、面试高频难点。传统的 SQL 教程往往只给出一张冷冰冰的结果表,而忽略了“分组、排序、滑动窗口”的动...

10200

spark 窗口函数速查表

数据仓库晨曦

12000

Meta发布Muse Spark,MSL的首份答卷!Alexandr Wang通过了吗?

用户11563501

Meta 刚刚发布了 Muse Spark,这是 Meta Superintelligence Labs (MSL) 的首个模型,也是九个月技术栈重构的成果。在...

21200

spark内核解析和调优指南

wuzhigang

| 1 | 可用的存储内存 = systemMaxMemory * spark.storage.memoryFraction * spark.storage.s...

17610

Spark SQL 函数分类导航

数据仓库晨曦

所有聚合函数(SUM/AVG/COUNT/MAX/MIN 等)都可以作为窗口函数使用,配合 OVER 子句和 frame 定义实现滑动计算。

16010

同芯不同命:同样GB10芯片,RTX Spark可跑Windows,DGX Spark却未必可行

GPUS Lady

本周一,NVIDIA重磅发布的RTX Spark超级芯片,凭借原生支持Windows on ARM(WoA)系统的特性,给广大开发者与PC用户带来了极大惊喜。这...

91610

Vera Rubin已量产!黄仁勋:RTX Spark重新定义PC!

芯智讯

6月1日上午11点,英伟达(NVIDIA)创始人兼CEO黄仁勋在中国台北流行音乐中心发表“GTC Taipei at COMPUTEX”主题演讲,为COMPUT...

84310

理性解析NVIDIA RTX Spark真实实力、差异与适用场景全盘梳理

GPUS Lady

在台北 Computex 2026大展上,NVIDIA 由黄仁勋亲自揭晓的RTX Spark 超级芯片(Superchip),无疑是本届展会最大重磅亮点。对于硬...

3.1K30

英伟达发布 RTX Spark:AI PC 这次可能真不是贴标签了

Henry Zhang

这两年,“AI PC”这个词已经快被说疲了。每家厂商都在讲本地 AI、会议总结、背景虚化、Copilot,但很多时候我用完的感觉是:电脑确实多了几个 AI 小功...

32510

基于 DGX Spark 的高效推理!开源机器人模型 MolmoAct2 完美集成 LeRobot,全链路开箱即用

GPUS Lady

具身智能(Embodied AI)领域迎来了一位强力新成员!艾伦人工智能研究所(Ai2)的开源机器人动作推理模型MolmoAct2目前已正式登陆 Hugging...

20310

Gemini Spark深度拆解:Google给AI一台永不关机的云服务器

陆业聪

• 中俄元首会晤叠加万亿科创再贷款政策,A股做多情绪显著回暖,资金聚焦AI与半导体主线

48010
领券