对话 Martin Kleppmann:DDIA 第二版揭秘,以及 AI 将如何颠覆分布式系统

本文永久链接 – https://tonybai.com/2026/04/26/interview-martin-kleppmann-ddia-2nd-edition-ai-distributed-systems

大家好,我是Tony Bai。

在后端架构师的世界里,有一本书被公认为“圣经”级别的存在,那就是 Martin Kleppmann 的《数据密集型应用设计》(Designing Data-Intensive Applications,简称 DDIA)

自 2017 年出版以来,这本书几乎重塑了一整代工程师对分布式系统的认知。无论你是要搞定千万级并发,还是设计高可用的存储架构,DDIA 永远是那个最初也是最后的“标准答案”。

然而,九年过去了,世界变了。

我们经历了从本地机房到全面云原生的跃迁,见证了 Kafka 从一个内部工具变成行业基础设施,更在这两年,迎来了大模型(LLM)对编程范式的史诗级冲击。

在一个技术日新月异的时代,经典的寿命往往很短。很多人都在问:DDIA 的理论还跟得上这个 AI 时代吗?

就在前几天,Martin Kleppmann 接受了一次的深度专访,正式官宣:DDIA 第二版,终于来了!

在这场长达一个多小时的对话中,Martin 不仅首次揭秘了新版中那些颠覆性的内容更新(比如为什么他“杀死”了 MapReduce),更是重点探讨了一个让所有人脊背发凉的话题:AI,到底会如何颠覆我们苦心经营了几十年的分布式系统架构?

今天,我们就来深度拆解这位分布式系统“教父级人物”的最新思考。

历史的拐点:从“物理磁盘”到“云原语”的倒塌

Martin 在访谈中提到,第二版之所以需要“重写”,是因为分布式系统的物理基石已经发生了根本性的位移。

在 DDIA 第一版编写时,主流的架构假设是:你拥有一堆物理机,每台机器挂着本地磁盘。如果你想实现高可用,你需要自己写代码处理副本复制。

但在 2026 年的今天,这种思维模式正在被彻底颠覆。

“现在的工程师不再思考如何给磁盘写数据,他们思考的是如何与对象存储(如 S3)交互。复制不再发生在数据库层,而是被内化到了对象存储这个基础抽象中。”

这种转变是极其深远的。这意味着,我们过去死记硬背的很多关于“本地存储性能优化”的知识正在失效。云原语(Cloud Primitives)正在取代物理硬件,成为新的架构单元。 这正是新版 DDIA 最大的改动之一:将“构建在云服务之上”作为一切讨论的新起点。

MapReduce 之死:一代霸主的退场

访谈中,Martin 抛出了一个让老兵们唏嘘不已的断言:“MapReduce 已经彻底死了。”

在第一版中,MapReduce 占据了大量的篇幅。但在第二版中,它被从核心位置撤下,仅仅作为一个“历史教学案例”。

“没人再手写 MapReduce 了。它的继任者——Spark 和 Flink,用更高级的抽象解决了一切。我们不应该再让读者把精力浪费在过时的工具上,而应该去理解流处理与批处理融合后的新世界。”

这种对技术的断舍离,展现了 Martin 作为顶级分布式系统架构师的冷酷与理性:当一个抽象已经完全被更高层的工具覆盖,它就失去了作为“工程前沿”的价值。

AI 的重塑:形式化验证的“文艺复兴”

标题中提到的“AI 如何颠覆分布式系统”,是整场访谈最精彩的部分。Martin 并没有谈论那些陈词滥调的“AI 写代码”,他提出了一个极具反差感的预言:AI,将让“形式化验证”这门古老的高端技术回归主流。

分布式系统中最恐怖的事情是什么?是那些人类大脑无法推演出的、由于网络延迟和时钟漂移引发的“隐性 Bug”

以往,我们用 TLA+ 或 FISB 进行形式化验证,代价极高,只有剑桥、谷歌的顶级研究员才玩得转。Martin 坦言,他在工业界工作时也从未用过。

但现在,AI 改变了这一切。

“LLM 正在变得越来越擅长编写数学证明。当我们可以让 AI 自动进行形式化验证,而不仅仅是跑单元测试时,我们就有可能在安全和金融等高风险领域,彻底消灭那些困扰我们几十年的分布式陷阱。”

这是一种降维打击。 以前我们靠“经验”去踩坑,未来我们靠 AI 和数学去“封印”坑位。

身份的危机:当人类不再拥有“挣扎权”

Martin 在访谈中对 AI 的普及展现出了一种深刻的忧虑。他认为,AI 正在剥夺初级工程师“建立心智模型(Mental Models)”的机会。

“为了学会一样东西,你必须经历挣扎。如果你遇到一个复杂的数据库性能 Bug,你翻遍文档、调试源码、最终解决它,这个过程会让你对系统产生极其深刻的直觉。

但如果 AI 直接跳出来给了你答案,你虽然解决了问题,但你的大脑却是一片空白。没有了挣扎,就没有了深刻的理解。

Martin 预言,未来的软件工程将面临一次严重的“人才断层”:顶层是理解系统本质的、拥有 DDIA 级认知的架构师;底层是只会调 API 的“提示词操作员”。中间那一层,正在消失。

Local-First:一场针对“云霸权”的抗争

除了 AI,Martin 现在倾注心血最多的研究领域是 Local-first Software(本地优先软件)

Martin 对当前的 SaaS 订阅模式提出了猛烈的批评:

“现在的 SaaS 公司,实际上是拿着枪指着用户的头:‘交钱,否则我们就删了你的数据’。这种极度中心化的模式,是极其不健康的。”

他正在研究如何构建去中心化的协作系统(如去中心化版的 Google Docs)。这引出了分布式系统最底层的极限挑战:在没有中心服务器、甚至没有统一时钟的情况下,如何解决并发冲突?

你在 DDIA 里学到的时钟偏移、向量时钟、共识协议,在 Local-first 的世界里,将从“大厂面试题”变成每一个开发者都要面对的“生存命题”。

小结:在万变中,抓住那个“不变”

访谈的最后,Martin 感慨,尽管技术层出不穷,但分布式系统的“第一性原理”从未改变。

“作为工程师,我们的核心价值正从‘如何实现一个算法’迁移到‘如何在复杂的权衡(Trade-offs)中做出决策’。”

AI 可以写下每一行代码,但它无法替你决定:是在这个业务场景下追求极致的一致性(Consistency),还是为了用户体验牺牲部分可靠性以换取低延迟(Latency)。

这种基于商业目标、社会伦理和技术约束的“决策力”,才是架构师真正的护城河。

DDIA 第二版的到来,并不是为了教你最新的工具,而是为了在这个被 AI 搅得天翻地覆的时代,给你一根能定住风浪的“定海神针”。

九年磨一剑。如果你想在这个 AI 颠覆一切的洪流中,依然能看透系统的本质,那么 Martin Kleppmann 的这本新版“圣经”,是你必须拿下的武器。

资料链接:https://www.youtube.com/watch?v=SVOrURyOu_U


今日互动探讨:

你觉得在 AI 能够生成绝大部分代码的未来,一个“懂分布式底层原理”的架构师,身价是会暴涨还是贬值?在你的日常工作中,有哪些分布式系统的痛点,是你最希望在 DDIA 第二版中看到的?

欢迎在评论区分享你的看法!


还在为写 Agent 框架频频死循环、上下文爆炸而束手无策?我的新专栏 从0 开始构建 Agent Harness 将带你:

  • 抛弃臃肿框架,回归“驾驭工程 (Harness Engineering)”的第一性原理
  • 用 Go 语言手写 ReAct 循环、并发拦截与上下文压缩引擎等,复刻极简OpenClaw
  • 构建坚不可摧的 Safety Middleware 与飞书人工审批防线
  • 在底层实现 Token 成本审计、链路追踪与自动化跑分评估
  • 从“调包侠”进化为掌控大模型边界的“AI 操作系统架构师”

扫描下方二维码,开启从 0 开始构建Agent Harness 的实战之旅。


原「Gopher部落」已重装升级为「Go & AI 精进营」知识星球,快来加入星球,开启你的技术跃迁之旅吧!

我们致力于打造一个高品质的 Go 语言深度学习AI 应用探索 平台。在这里,你将获得:

  • 体系化 Go 核心进阶内容: 深入「Go原理课」、「Go进阶课」、「Go避坑课」等独家深度专栏,夯实你的 Go 内功。
  • 前沿 Go+AI 实战赋能: 紧跟时代步伐,学习「Go+AI应用实战」、「Agent开发实战课」、「Agentic软件工程课」、「Claude Code开发工作流实战课」、「OpenClaw实战分享」等,掌握 AI 时代新技能。
  • 星主 Tony Bai 亲自答疑: 遇到难题?星主第一时间为你深度解析,扫清学习障碍。
  • 高活跃 Gopher 交流圈: 与众多优秀 Gopher 分享心得、讨论技术,碰撞思想火花。
  • 独家资源与内容首发: 技术文章、课程更新、精选资源,第一时间触达。

衷心希望「Go & AI 精进营」能成为你学习、进步、交流的港湾。让我们在此相聚,享受技术精进的快乐!欢迎你的加入!

img{512x368}


商务合作方式:撰稿、出书、培训、在线课程、合伙创业、咨询、广告合作。如有需求,请扫描下方公众号二维码,与我私信联系。

为什么人人爱 Rust,但 RedMonk 榜单却给它泼了一盆冷水?

本文永久链接 – https://tonybai.com/2026/04/25/rust-popularity-vs-redmonk-ranking-reality-check

大家好,我是Tony Bai。

在过去几年的技术圈,Rust 是当之无愧的“流量之王”。

它连续多年在 Stack Overflow 开发者调研中蝉联“最受喜爱的语言”;它是 Linux 内核 30 年来引入的唯一非 C 语言;它是微软、亚马逊等大厂重塑底层安全架构的希望。

如果只看社交媒体和社区讨论,你会觉得 Rust 已经“统治了世界”。在一片赞歌中,大家默认 Rust 杀进主流榜单前十、取代传统语言只是时间问题。

但就在 2026 年 4 月,一份来自权威分析机构 RedMonk 的2026.1编程语言排行榜,却给所有“Rust 狂热者”泼了一盆透心凉的冷水。

数据呈现了一个极其残酷的反差:

在这份以“开发者真实选择”为核心指标的榜单上,Rust 的排名并没有像预期的那样一飞冲天,而是停滞在了第 20 位,甚至被曾被视为小众的 Dart 所超越。相比之下,那个常被调侃“无趣”的 Go 语言,依然稳稳地坐在第 12 位,并在云原生领域保持着统治地位。

为什么人人爱 Rust,但它在工业界的大规模普及却显得如此缓慢?为什么它“攻陷”了最硬核的 Linux 内核,却迟迟进不了普通开发者的日常?

今天,我想结合近期社区的深度讨论,扒开 Rust 这层华丽的外衣,带大家看看这门“天选之子”背后的生存现状与真实挑战。

口碑与数据的鸿沟:被锁死在“塔尖”的生产力

在开发者 Alejandra 最近整理的一份清单里,Rust 的“战绩”堪称辉煌:Windows 11 的核心组件、AWS 的 Firecracker 虚拟化、Cloudflare 的下一代代理服务器 Pingora……

但这恰恰揭示了 Rust 目前最大的尴尬:它是一个“属于 1% 的神兵利器”。

这些成功的 Rust 项目,无一例外都属于“系统级基础设施”领域。它们雇佣的是全球前 1% 的顶级程序员,拥有极其漫长的研发周期和近乎奢侈的调试成本。

正如 RedMonk 的分析师在报告中一针见血地指出:

“Rust 依然面临着非专家程序员难以逾越的学习门槛。专家们愿意投入时间,但更广泛的主流采用似乎面临着巨大的惯性。”

开发者 Alejandra 在其博文的自白中也坦言:

“无论我们如何自我安慰 Rust 已经进入主流,事实是:它离 C++ 甚至 Java 的普及程度,依然有着深不见底的鸿沟。大学教的第一门语言依然是 Java,飞机上依然在用 C++,网页里依然全是 Javascript。”

Rust 已经完成了从 0 到 1 的“极客突围”,却正在撞向从 1 到 N 的“工业化之墙”。

标准库的困局:当“技术洁癖”变成“协作负担”

除了学习曲线,Rust 进军主流的第二个障碍,也许就是它那小而美的标准库。

这篇名为《Unpopular opinion: Rust should have a larger standard library》(非主流观点:Rust 应该有一个更大的标准库)的帖子,戳中了无数一线开发者的泪点:

在我之前写过的一篇文章《别搞“小而美”了!Rust 开发者请愿:求求标准库学学 Go 吧》中也曾提过社区对 Rust 标准库的述求:

“我不想写个程序就要拉几百个三方库!生成一个随机数,std 里没有;想要个异步运行时,std 里也没有。我不得不把信任托付给几百个散落在 GitHub 各地、由个人维护的小型包(Crate)。”

这种对“核心精简”的极致追求,正在引发严重的“供应链安全焦虑”。

在 Go 的世界里,你可以用标准库完成 90% 的后端开发,这意味着你的核心链路是由 Google 顶尖团队直接背书的。但在 Rust 的世界里,开发者面临着“碎片化依赖”的内耗。

这种“标准库贫血”导致了一个反直觉的现象:Rust 是一门为了“安全”而生的语言,但它极度依赖社区包的机制,却在客观上增加了供应链被“投毒”的风险。

正如评论区所感慨的:“标准库是模块最终的坟场。”Rust 团队为了避免标准库变得臃肿,却无意中将“复杂性”和“审计成本”全部转嫁给了一线开发者。这种“技术洁癖”在处理顶级项目时是美德,但在处理追求效率的通用业务时,却成了巨大的阻碍。

Go vs Rust:工业生产力的两种极致审美

为什么 Go 能在 RedMonk 榜单上稳坐第 12,而 Rust 只能在第 20 徘徊?

这是两种完全不同的工程学审美,也决定了它们在大规模协作中的不同命运:

  • Go 的审美是“工厂流水线”:它不鼓励个人英雄主义,它用 gofmt 强制所有人的代码长得一模一样。它追求的是“平均生产力的最大化”。即便是一个普通水准的程序员,在 Go 的框架下也很难写出摧毁系统的灾难性代码。这种“无聊”和“简单”,正是大厂进行大规模兵团作战时的首选。
  • Rust 的审美是“顶级艺术工作室”:它追求极致的精准、极致的控制。每一个 borrow,每一个 lifetime 都是在进行微雕。它追求的是“个体生产力的上限”

但在现代软件工业中,“下限的稳定性”往往比“上限的惊艳度”更具普适价值。 绝大多数公司需要的不是一个能手搓编译器的天才,而是一群能够按照既定流程、稳健产出、且易于维护代码的合格工程师。

AI 时代的变数:谁才是对机器最友好的母语?

RedMonk 的报告里还提出了一个极具前瞻性的观察:理论上,AI 编码辅助工具应该能抹平 Rust 的学习曲线,但现实并非如此。

为什么?

大模型(LLM)的本质是模式识别和概率预测。

对于语法单一、推崇“唯一路径”的 Go 语言来说,AI 生成的代码准确率极高,且人类审查的认知负荷极低。

而对于规则极其复杂、生命周期标记繁琐的 Rust 来说,AI 生成的代码极易出现“微妙的语法错误”或“不地道的生命周期设计”。人类开发者在审查 AI 生成的 Rust 代码时,往往比自己重写一遍还要痛苦。

在“机器写代码”即将接管开发流程的未来,简单、标准、甚至有些“死板”的语言,反而拥有更宽、更深的护城河。《HashiCorp 创始人亲口“认错”:AI 让我重新爱上了 Go (文末福利)》一文中Hashicorp创始人Mitchell Hashimoto 因 AI 重新爱上Go,以及Pandas 之父近期更喜欢让 AI 用Go写代码也印证了这一点。

小结:架构师的清醒与权衡

作为一个架构师,我们不必因为 Rust 在榜单上的“冷水”而否定它的伟大。

Rust 正在解决软件工程中最难的问题——在不牺牲性能的前提下,从根源上消灭内存漏洞。它的价值,已经在 Linux 内核和那些“不容有失”的领域得到了证明。

但我们也必须清醒地认识到:技术的流行度(Popularity)与技术的高级感(Elegance)并不总是正相关。

如果你在构建下一代安全操作系统、数据库内核或高性能边缘网关,Rust 是你不二的利剑。

但如果你在构建一个需要快速迭代、支撑公司核心营收、且由几十甚至上百人协作的后端业务系统,请务必保持客观:那个排名第 12、虽然有些“平庸”但永远能准时交付、且对 AI 极度友好的 Go,或许才是那个更优的工程方案。

再次祭出那句话:你的技术护城河,从来不是由你用什么语言决定的,而是由你解决问题的深度,以及你在各种极端权衡(Trade-offs)中做出的选择决定的。

资料链接:

  • https://blog.goose.love/posts/what-actually-uses-rust/
  • https://www.reddit.com/r/rust/comments/1sqyjxa/blog_ok_what_actually_uses_rust/
  • https://redmonk.com/sogrady/2026/04/14/language-rankings-1-26/

今日互动探讨:

看完这份“人人爱 Rust,但榜单很冷酷”的现实反差,你觉得 Rust 挺进主流最大的障碍是什么?你认为“大标准库”是未来编程语言的必然趋势吗?

欢迎在评论区分享你的看法!


还在为写 Agent 框架频频死循环、上下文爆炸而束手无策?我的新专栏 从0 开始构建 Agent Harness 将带你:

  • 抛弃臃肿框架,回归“驾驭工程 (Harness Engineering)”的第一性原理
  • 用 Go 语言手写 ReAct 循环、并发拦截与上下文压缩引擎等,复刻极简OpenClaw
  • 构建坚不可摧的 Safety Middleware 与飞书人工审批防线
  • 在底层实现 Token 成本审计、链路追踪与自动化跑分评估
  • 从“调包侠”进化为掌控大模型边界的“AI 操作系统架构师”

扫描下方二维码,开启从 0 开始构建Agent Harness 的实战之旅。


原「Gopher部落」已重装升级为「Go & AI 精进营」知识星球,快来加入星球,开启你的技术跃迁之旅吧!

我们致力于打造一个高品质的 Go 语言深度学习AI 应用探索 平台。在这里,你将获得:

  • 体系化 Go 核心进阶内容: 深入「Go原理课」、「Go进阶课」、「Go避坑课」等独家深度专栏,夯实你的 Go 内功。
  • 前沿 Go+AI 实战赋能: 紧跟时代步伐,学习「Go+AI应用实战」、「Agent开发实战课」、「Agentic软件工程课」、「Claude Code开发工作流实战课」、「OpenClaw实战分享」等,掌握 AI 时代新技能。
  • 星主 Tony Bai 亲自答疑: 遇到难题?星主第一时间为你深度解析,扫清学习障碍。
  • 高活跃 Gopher 交流圈: 与众多优秀 Gopher 分享心得、讨论技术,碰撞思想火花。
  • 独家资源与内容首发: 技术文章、课程更新、精选资源,第一时间触达。

衷心希望「Go & AI 精进营」能成为你学习、进步、交流的港湾。让我们在此相聚,享受技术精进的快乐!欢迎你的加入!

img{512x368}


商务合作方式:撰稿、出书、培训、在线课程、合伙创业、咨询、广告合作。如有需求,请扫描下方公众号二维码,与我私信联系。

如发现本站页面被黑,比如:挂载广告、挖矿等恶意代码,请朋友们及时联系我。十分感谢! Go语言第一课 Go语言进阶课 AI原生开发工作流实战 从 0 开始构建 Agent Harness Go语言精进之路1 Go语言精进之路2 Go语言第一课 Go语言编程指南
商务合作请联系bigwhite.cn AT aliyun.com
这里是 Tony Bai的个人Blog,欢迎访问、订阅和留言! 订阅Feed请点击上面图片

如果您觉得这里的文章对您有帮助,请扫描上方二维码进行捐赠 ,加油后的Tony Bai将会为您呈现更多精彩的文章,谢谢!

如果您希望通过微信捐赠,请用微信客户端扫描下方赞赏码:

如果您希望通过比特币或以太币捐赠,可以扫描下方二维码:

比特币:

以太币:

如果您喜欢通过微信浏览本站内容,可以扫描下方二维码,订阅本站官方微信订阅号“iamtonybai”;点击二维码,可直达本人官方微博主页^_^:
本站Powered by Digital Ocean VPS。
选择Digital Ocean VPS主机,即可获得10美元现金充值,可 免费使用两个月哟! 著名主机提供商Linode 10$优惠码:linode10,在 这里注册即可免费获 得。阿里云推荐码: 1WFZ0V立享9折!


View Tony Bai's profile on LinkedIn
DigitalOcean Referral Badge

文章

评论

  • 正在加载...

分类

标签

归档



View My Stats