工具越买越多，取个数却还要等 1–3 天；AI 已经装进数据平台，问它"GMV"，它还是答不上来。问题不在模型，在它不知道你的业务长什么样。

摘要：从敲下 spark-submit 到第一个 Task 在 Executor 上跑起来，中间到底经历了什么？本文以"时间线"的方式，将 Spark 两大调度...

摘要：Spark Master 是 Standalone 模式的"集群大脑"。它管理所有 Worker 的注册与心跳，调度 Driver 和 Applicati...

上一篇结尾留下了一条悬念：Producer 「查元数据缓存」查到的那些 Leader 位置，最初是从哪来的？bootstrap.servers 明明只写了一个地...

近年来，公安部会同工信部、中国人民银行持续深入推进打击治理电信网络诈骗违法犯罪工作，综合采取多种防范措施，最大限度预防案件发生、减少群众财产损失，联合推出系列官...

2.2 迁移文档列了几处会影响升级的变更：geo_point 换了新的存储格式（doc_values 和 coerce 参数因此被移除）、脚本受 Java Se...

7.x 到 8.x 迁移时，.data-frame-notifications-1 这个 Transform 通知索引被 .transform-notifica...

RocksDB 是 LSM 树，memtable 刷盘变成 SST，SST 一旦写完就不再改。

摘要：如果说 Job 是 Spark 的"任务单"，Stage 就是"施工阶段"，Task 就是每个工人的"具体活"。一个 Job 被 DAGScheduler...

摘要：为什么 map().filter() 可以在一个 Stage 内完成，而 reduceByKey() 必须切分新的 Stage？为什么 Shuffle 是...

2.1 里两件事一起发生：scan 这种 search type 被废弃，改成"按 _doc 排序的 scroll"；同时 from + size 超过 ind...

ES 的 Behavioral Analytics（行为分析）从 9.0 起标记弃用，将在未来版本移除。API 目前还能用，但会返回警告头。这是个"整块功能下线...

摘要：这是 Spark 部署模式系列的终章。如果说 Client 模式是你手中的风筝，Cluster 模式就是放飞到云端的无人机——spark-submit 提...

摘要：你是否清楚一个 Spark 应用中到底有几个 Job？为什么 .collect() 会触发 Job 而 .map() 不会？Application、Job...

企业数据越积越多，找表却越来越难；同一指标，销售和财务算出两个数。问题往往不在数据本身，而在于缺少统一的建模管理流程。

2026 年 10 月 21 日至 22 日，由飞轮科技主办的 Apache Doris Summit 2026 线上技术峰会圆满落下帷幕。本次峰会以 “Pow...

导读：Apache Doris 5.0 增量计算预告（1）｜场景方案篇：数据的实时写入只是第一步，如何让下游指标与宽表低延迟、低成本地同步变更，是实时数仓搭建的...