本文永久链接 – https://tonybai.com/2025/09/05/go-proxy-revise-background-refresh-pacing

大家好，我是Tony Bai。

2025年8月14日，Go开发者Ted Unangst发表了一篇措辞犀利的博文——《What is the go proxy even doing?》。他用服务器日志作为证据，公开质疑Go官方模块代理（proxy.golang.org）对其个人代码托管服务humungus.tedunangst.com产生了“洪水般”的、看似毫无意义的巨大流量。这个事件迅速在社区发酵，将一个通常在后台默默工作的核心基础设施，推上了风口浪尖。当然在我的印象中，这已经不是Go社区第一次“抱怨” 官方Go proxy的“诡异”行为给一些小型站点带来的烦恼了。

不过不同的是，这次Go团队的前技术leader、核心成员Russ Cox (rsc) 迅速响应，在Go的官方issue追踪系统中创建了两个关键问题（#75120 和 #75191），不仅承诺调查并解决问题，更罕见地、极其详尽地公开了Go Module Proxy的内部工作原理、缓存策略以及导致此次事件的深层原因。

这场由一篇博文引发的“悬案”及其官方复盘，为我们提供了一个绝佳的机会，去深入理解Go Module Proxy这个我们每天都在使用，却又知之甚少的系统。它背后的“背景刷新”机制，究竟是为了提升开发者体验的“优化”，还是在某些边缘情况下会演变成对小型开源社区的“DDoS”？

事件回顾：来自小型服务器的“呐喊”

Ted Unangst的博文主要控诉了以下几个现象：

1. 持续的背景流量：即使没有任何新版本发布，proxy.golang.org也会以几分钟一次的频率，持续尝试从他的服务器hg clone（克隆）多个仓库。由于他的服务器设置了24小时内只允许一次克隆的速率限制，这些请求大多被429 Too Many Requests拒绝，但在日志中形成了持续的“背景辐射”。
2. “惊群效应”（Thundering Herd）：当他推送一个新版本（一个新tag）并本地执行go mod tidy后，短短14秒内，他的服务器就遭到了来自Google不同IP地址的、数十个并发的hg clone请求。他将其形容为“洪水来了”。
3. 低效的拉取策略：Proxy每次都执行完整的hg clone，而不是更高效的hg pull，这对于非Git的VCS（版本控制系统）来说，意味着巨大的带宽浪费。

Unangst的质疑直击要害：“为什么你们要这样构建一个分布式系统？……难道Google认为从我的服务器下载比从他们自己的云存储下载更便宜吗？”

Go官方的深度复盘：揭开代理的神秘面纱

Russ Cox的官方回应堪称透明沟通的典范。他不仅承认了问题的存在，还详细解释了Proxy的设计理念和实现细节，让我们得以一窥其内部运作。

Go Module Proxy的核心目标

• 可用性与可靠性：作为Go生态的中央缓存，确保开发者在任何上游代码仓库宕机时，依然能获取到模块。
• 降低延迟：通过主动的背景刷新，提前将热门或近期被访问过的模块信息更新到缓存中，使得开发者在执行go get等命令时，能立即获得响应，而不是等待Proxy实时回源。

缓存与刷新策略的权衡

Proxy缓存多种类型的数据，每种都有不同的刷新策略，而这些策略正是问题的根源：

• 模块Zip包：

  • 有许可证：被认为是可再分发的，永久缓存，从不刷新。
  • 无许可证：被视为不可再分发，缓存30天后过期。为了避免用户请求时缓存失效导致的高延迟，Proxy会在其25天“高龄”时触发刷新，但前提是过去1天内有人请求过这个版本。

• 版本列表 (go list -m -versions …)：

  • 缓存3小时后过期。为了让go get -u能尽快看到新版本，Proxy会在其25分钟“高龄”时触发刷新，但前提是过去3天内有人请求过这个列表。

• 版本查询 (go get module@main)：

  • 缓存1小时后过期。同样，在25分钟时触发刷新，前提是过去1天内有人请求过。

“万恶之源”：不匹配的刷新与访问周期

在issue #75191中，rsc进行了一次深刻的自我反思，指出了这些策略中的一个致命缺陷——读放大（Read Amplification）。

• 模块Zip包（无许可证）：刷新周期（25天）与“近期访问”周期（1天）不匹配，但因为时间跨度大，影响不大。

• 版本列表：刷新周期是25分钟，但触发条件是过去3天内有一次访问即可。这意味着，一个开发者在周一的一次go get -u，将导致Proxy在接下来的72小时内，每25分钟就去上游仓库检查一次更新！

  • 最坏情况下的读取放大：3天 * 24小时/天 * 60分钟/小时 / 25分钟/次 ≈ 172.8次。一次用户请求，可能导致Proxy向上游发起172.8次刷新！

• 版本查询：类似地，一次go get …@main请求，可能导致24 * 60 / 25 ≈ 57.6次刷新。

rsc坦诚，这种激进的刷新策略源于早期社区对“go get无法立即看到新版本”的普遍抱怨，是当时Go团队为了优化开发者体验而做出的决策。然而，对于那些不常用（比如几天才被访问一次）且托管在非Git（如Mercurial）小型服务器上的模块，这种策略就演变成了一场流量灾难。

解决方案：重新“步调一致”

Go团队提出的解决方案，是让刷新周期与“近期访问”的定义“步调一致”（Pacing）。新的策略是：

• 版本查询：每25分钟刷新一次，但前提是过去25分钟内必须有用户请求。
• 版本列表：每25分钟刷新一次，但前提是过去25分钟内必须有用户请求。

这个看似微小的改动，却有着深远的影响：

• 对于热门模块：几乎没有影响，因为它们每时每刻都有用户在请求。
• 对于无人问津的模块：没有影响，它们不会被刷新。
• 对于偶尔被访问的模块：影响巨大。现在，一次用户请求最多只会触发未来25分钟内的一次背景刷新。最坏情况下的读取放大被降至最优的1倍。

这意味着，Go Module Proxy因为背景刷新而产生的上游流量，将永远不会超过一个没有缓存、所有请求都实时回源的代理所产生的流量。

对Go开发者和开源维护者的启示

这场事件不仅仅是Go团队的一次内部优化，它为整个生态的参与者都带来了宝贵的经验：

1. 开源模块维护者：如何保护你的服务器？

• 使用Git：Go Proxy对Git有特殊的轻量级刷新优化。它可以通过git ls-remote来检查更新，而无需克隆整个仓库。对于Mercurial、Bazaar等VCS，目前仍需要完整克隆。 issue #75119 正在追踪为Mercurial添加类似优化的工作。
• 添加LICENSE文件：如果你的代码允许再分发，务必在仓库根目录添加一个被Go识别的LICENSE文件。这将让你的模块版本被Proxy永久缓存，彻底免除Zip包的刷新流量。
• 了解求助渠道：Go团队在issue中明确表示，如果你的服务器遭受了来自Proxy的过多流量，应该去Go的官方issue追踪系统报告。他们已经添加了FAQ条目来引导用户。

2. Go模块使用者：如何做一个“好公民”？

• 理解你命令的“涟漪效应”：下一次你输入go get -u或go get module@main时，请意识到这个简单的命令可能会给模块的源服务器带来持续一段时间的刷新压力。
• 工具开发者请注意：如果你正在编写扫描或爬取Go模块的工具，请尽可能使用https://proxy.golang.org/cached-only端点。这将只访问Proxy的缓存，不会触发任何到上游服务器的回源或刷新请求。

3. 对Go团队的思考：简单性与复杂性的永恒权衡

这个事件也揭示了Go语言哲学的一个侧面。Go团队为了追求用户体验的“简单”（即时获取最新版本），在Proxy的内部引入了“复杂”的、带有潜在风险的刷新逻辑。当这种复杂性与现实世界的多样性（不同的VCS、不同的模块流行度）碰撞时，问题便暴露出来。

最终的解决方案，回归到了一个更“简单”、更可预测的模型。这再次印证了软件工程的一条黄金法则：简单的、可预测的系统，长期来看往往比一个充满“智能”优化的复杂系统更加健壮。

小结：一次迈向成熟的进化

Go Module Proxy的这次“流量悬案”，最终以一次开放、透明的社区互动和深刻的技术改进而告终。它既解决了小型服务器维护者的燃眉之急，又推动了Go核心基础设施向着一个更公平、更健壮、更尊重生态多样性的方向进化。对于我们开发者而言，这是一个了解Go Proxy内部机制的宝贵机会，也是一堂关于分布式系统设计、社区责任和技术权衡的生动课程。

参考资料

• https://github.com/golang/go/issues/75191
• https://github.com/golang/go/issues/75120
• https://flak.tedunangst.com/post/what-is-the-go-proxy-even-doing

想系统学习Go，构建扎实的知识体系？

我的新书《Go语言第一课》是你的首选。源自2.4万人好评的极客时间专栏，内容全面升级，同步至Go 1.24。首发期有专属五折优惠，不到40元即可入手，扫码即可拥有这本300页的Go语言入门宝典，即刻开启你的Go语言高效学习之旅！

商务合作方式：撰稿、出书、培训、在线课程、合伙创业、咨询、广告合作。如有需求，请扫描下方公众号二维码，与我私信联系。

本文永久链接 – https://tonybai.com/2025/08/21/go-rust-official-voices

大家好，我是Tony Bai。

最近，在阅读 Rust 核心团队负责人 Niko Matsakis 庆祝十周年的系列博文时，我注意到了一个有趣的现象。我下意识地将他的文字，与我长期关注的 Go语言之父Rob Pike以及Go 团队前技术负责人 Russ Cox 的文章放在一起对比。

这时我发现，两者窗外的风景截然不同。

一边，Niko Matsakis 这样写道：

“Graydon（Rust创始人）为我们设定了正确的‘北极星’……‘是的，我们可以拥有好东西’，我常这么想。这句话也捕捉到了 Rust 的另一种特质，那就是试图挑战关于‘权衡’的传统智慧。”

另一边，Russ Cox 在一篇关于 Go 模块依赖的重要文章中，开篇即是：

“本文定义了 Go 模块，这是对 go get 命令支持的版本化依赖的提议。这篇文章是七篇文章中的第一篇，描述了一个关于版本化 Go 的全面提案。”

可以看到，一种声音像一位哲学家，在讨论愿景和原则；另一种，则像一位总工程师，直接给出工程计划。

这并非偶然的文笔差异。

一门编程语言核心团队的写作风格，不只是表面的文字选择，而是其设计哲学、治理模式和社区文化的直接反映。 它在很大程度上预示了这门语言的演进方向，以及它最终会吸引哪一类开发者。

今天，我想和你一起分析这两种迥异的“官方之声”，并尝试回答一个核心问题：

在 Rust 的哲学思辨与 Go 的工程决断之间，究竟隐藏着怎样的语言灵魂与未来？

Rust 的“探索式叙事”——在复杂世界中寻求赋能

如果你长期阅读 Rust 官方博客或 Niko Matsakis 的个人博客，会发现一种独特的叙事模式：愿景驱动，讨论权衡，社区对话。

Niko 的“Rust 2025”系列，开篇并非罗列要实现的功能，而是先定义 Rust 的“核心使命”——赋能基础软件。他花了不少篇幅来构建一个叙事框架，用“北极星”来比喻指引方向的技术与文化原则，用“大力水手菠菜”来形容类型系统的作用，用“平滑的迭代式深化”来描述理想的用户体验。

这种风格的背后，是对一个根本事实的承认：系统编程本身是复杂的。

Rust 的设计哲学，不是回避这种复杂性，而是正视它，并提供一套强大的工具去驾驭它。这套工具，就是其所有权系统、生命周期和 Trait 系统。

这些工具无疑是复杂的，也带来了陡峭的学习曲线。但 Rust 官方文章的字里行间，总是在传达一个核心信念：这种复杂性，是为了换取一种前所未有的“赋能 (Empowerment)”。

当你掌握了这些工具，你便能在编译器的帮助下，编写出兼具高性能、内存安全和高度抽象的代码。这是一种“先难后易”的设计。Rust 的文章，就像一位向导，它不否认前路复杂，但会耐心解释工具的用法，并清晰地展示目标达成后所能获得的能力，让你相信这种投入是值得的。

这种“探索感”也体现在 Rust 的社区文化和治理模式上。

Niko 在文章中反复使用 “我们 (we)” 这个词，而这个“我们”，指代的通常是整个 Rust 社区和所有贡献者。他乐于讲述 ACM 获奖名单难产的故事，以此来证明 Rust 的成功是“集体所有”的。

这种对话式的风格，与其开放的 RFC (Request for Comments) 流程是一致的。任何重大的语言变更，都必须经过漫长、公开的社区讨论。Rust 的进化，是一个由全球开发者共同参与、自下而上推动的过程。

所以，当你阅读 Rust 的“官方之声”时，你其实是在了解一个公开的设计讨论。它邀请你一起思考“什么是更好的软件”，并相信通过集体的智慧，能够不断接近理想的答案，哪怕过程充满思辨与权衡。

Go 的“工程化叙事”——在现实世界中追求简洁

现在，让我们切换到 Go 的世界。

如果你阅读 Russ Cox 或 Rob Pike 的文章，会立刻感受到一种截然不同的气息：问题驱动，逻辑清晰，方案明确。

Go 的文章，几乎总是以一个具体的、待解决的工程问题开篇。无论是包管理的混乱，还是泛型的缺失，他们会用严谨的逻辑，一步步地分析问题背景、评估现有方案，最终给出一个经过深思熟虑的官方提案。

这里没有宏大的比喻，取而代之的是清晰的数据、代码示例和对各种边界情况的分析。他们追求的不是思想的深邃，而是方案的“显而易见 (obvious)”。

这种风格背后，是对另一个根本事实的坚守：大规模软件工程的核心挑战，是控制复杂性。

Go 的设计哲学，可以概括为“规定性的简单性 (prescriptive simplicity)”。它相信，通过提供一个更小的工具集，并制定严格的工程规范（如 gofmt），可以显著降低团队协作的认知成本，从而提升整体生产力。

Go 团队清楚，每一个新加入语言的特性，都是一种“复杂性预算”的支出。因此，他们对此极为审慎。泛型这个功能，Go 社区讨论了近十年，核心团队才最终拿出一个他们认为足够简单、不会破坏 Go 核心价值的方案。

在这种哲学下，Go 的文章读起来就像一份工程白皮书。它不展示所有可能的路径，而是直接告诉你那条经过专家团队验证过，被认为最平坦、最宽阔的道路。它传递的核心信念是：“相信我们，这条路最简单直接，最能规模化。”

这种“决断感”也体现在 Go 的治理模式上。

Go 的演进，更多是由一小群核心专家（很多来自 Google）主导的“自上而下”模式。虽然他们也会通过提案流程征求社区反馈，但最终的决策权高度集中。文章中，“我们 (we)”这个词，更多时候指代的是 Go 核心团队。

这种模式保证了 Go 的稳定性和向后兼容性，但也意味着语言的演进会更加保守。Go 的进化，更像是一系列精准解决现实问题的“外科手术”，而非一场开放式的探索。

所以，当你阅读 Go 的“官方之声”时，你其实是在看一份来自顶级工程团队的技术报告。它不侧重于邀请你参与设计权衡，而是直接为你提供一个经过验证的、旨在解决你当前问题的最佳实践。

文字的岔路口，语言的未来

这两种截然不同的叙事风格，如同两条岔路，清晰地预示了 Rust 和 Go 在未来演进道路上的不同选择。

Rust 的未来，将是一场对语言能力边界的持续探索。

它会继续在“可扩展编译器”、“语言互操作”、“函数Traits”等领域，尝试为开发者提供更强大的“赋能”工具。它的进化过程将继续是思辨性的、社区驱动的，充满思想碰撞。这也可能意味着，它的学习曲线在短期内不会变得平缓，而重大的新特性，依然需要较长的讨论和共识周期。

Go 的未来，则是一场稳健的工程建设。

它将继续保持克制和实用主义。下一个重大变更，几乎可以肯定是为了解决大规模工程中出现的下一个具体痛点（比如，可感知NUMA的GC、对SIMD指令的内置支持等）。Go 会极力捍卫其“简单”的核心价值，避免任何可能导致语言心智模型复杂化的改动。它的进化将是可预测的、问题驱动的。

在这里，我想提出一个或许能概括两者差异的观点：

Rust 试图通过提供复杂的工具，让你成为一个思考更周全、能力更强的程序员；而 Go 则试图通过提供简单的工具，让你立即成为一个在团队中高效协作的程序员。

一个是授你以渔，但渔具复杂；一个是直接给你一条标准化的、足够好用的鱼竿。

小结：开发者如何选择？——聆听与你共鸣的声音

到这里，我们已经清晰地看到，Rust 和 Go 的“官方之声”背后，是两套截然不同的世界观。

• Rust 的世界观是赋能与驾驭： 它相信通过赋予开发者强大的工具，可以驾驭固有的复杂性，构建出理论上最优的软件。
• Go 的世界观是约束与纪律： 它相信通过设定清晰的约束，可以消除不必要的复杂性，构建出工程上最稳健、最易于维护的软件。

那么，作为开发者，我们该如何选择？

我的建议是，超越那些性能跑分和“Hello World”的语法对比，去读一读他们核心团队的文章吧。

问问你自己：

• 你是更倾向于一场开放式的、关于“可能性”的哲学讨论，还是更需要一份逻辑严密、直指问题核心的工程方案？
• 你是在寻找一个与你一同探索复杂问题的“伙伴”，还是一个为你提供清晰建造指南的“总工程师”？

这个问题的答案，可能比任何技术指标都更能决定你的项目能否成功、你的团队是否快乐。

因为最终，我们选择一门编程语言，远不止是选择一个编译器和一套库。我们是在选择一个与之共鸣的社区，一套解决问题的世界观，一种塑造我们思维方式的技术文化。

而这一切，早已写在了他们的字里行行间。

你，听到了哪种声音的回响？

你的Go技能，是否也卡在了“熟练”到“精通”的瓶颈期？

• 想写出更地道、更健壮的Go代码，却总在细节上踩坑？
• 渴望提升软件设计能力，驾驭复杂Go项目却缺乏章法？
• 想打造生产级的Go服务，却在工程化实践中屡屡受挫？

继《Go语言第一课》后，我的《Go语言进阶课》终于在极客时间与大家见面了！

我的全新极客时间专栏 《Tony Bai·Go语言进阶课》就是为这样的你量身打造！30+讲硬核内容，带你夯实语法认知，提升设计思维，锻造工程实践能力，更有实战项目串讲。

目标只有一个：助你完成从“Go熟练工”到“Go专家”的蜕变！ 现在就加入，让你的Go技能再上一个新台阶！

商务合作方式：撰稿、出书、培训、在线课程、合伙创业、咨询、广告合作。如有需求，请扫描下方公众号二维码，与我私信联系。