
Fly.io 推出 Gossip Glomers 编程挑战,弥合分布式系统理论与实践
来源标题:Gossip Glomers
Fly.io 发起名为 Gossip Glomers 的编程挑战,旨在让开发者在实践中学习分布式系统理论。该挑战试图弥合软件开发者的工程实践与学术界理论之间的鸿沟,原文称这是一场「让你写点代码」的精心策划。具体挑战形式和参与方式未在节选中说明。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
Annie Ruygt 我们是 Fly.io。我们在全球各地自有的硬件上为用户运行应用。这篇文章不是关于我们平台的。确切地说,它是一个精心设计的“阴谋”,目的就是让你纯粹为了好玩去写点代码。 在计算机科学领域,业界由两个截然不同却又同等重要的群体代表:构建 Rails 应用和移动游戏的软件开发者,以及撰写理论论文、论证这些应用试图解决的问题为何是 NP-hard 的学者。这是一个关于这两者的故事。 分布式系统横跨了实践与学术的鸿沟。读一摞 MIT 博士论文也许是个不错的周五夜晚,但它无法让你具备在凌晨两点调试多服务故障的能力。那需要真实的实战经验。 同样,构建一堆微服务也不会赋予你优雅且安全地处理故障的概念工具。许多故障场景都很罕见。它们不会出现在单元测试里。但一旦出现,就是毁灭性的。把理论吃透,才能让你从一开始就有机会设计出正确的系统。 实践路线和学术路线鲜有交集。为了解决这个问题,我们与 Jepsen 的作者 Kyle Kingsbury 合作,开发了一系列分布式系统挑战,将真实代码与 Jepsen 验证系统的学术严谨性结合起来。 我们把这些挑战称为 Gossip Glomers。 Glomer 到底是什么鬼? 这是关于 CAP 定理的一个精心设计的双关梗。 你认识 Kyle Kingsbury,多半是因为他那系列把分布式数据库批得体无完肤的“Call Me Maybe”博客文章。你可能也知道 Jepsen——Kyle 用来进行这些分析的开源工具,基于 Clojure 构建。其实,Kyle 还在 Jepsen 之上写了另一个工具,叫做 Maelstrom。 Maelstrom 在模拟网络上运行玩具级的分布式系统。它很容易在一台笔记本上跑起来。Kyle 用它来教分布式系统。我们都觉得,做一系列挑战来教互联网上的人使用 Maelstrom,进而学到一些分布式系统理论,会是件很棒的事。 每个挑战由几个部分组成: 我们的挑战从简单开始,越往后越难。它们被组织为六个高层级挑战,其中许多挑战内部又包含若干更小的挑战。 首先,你会从 Echo 挑战开始。这是分布式系统挑战中的“hello world”。它让你跑起来,并帮助你理解这些挑战的运作方式。 接下来,你要构建一个完全可用(totally-available)的分布式唯一 ID 生成器。在这个挑战中,节点需要无需协调,独立地为任意数量的客户端生成唯一标识符。 之后,难度开始攀升,来到广播挑战。在这个挑战中,你需要把消息传播到集群中的所有节点。你需要确保在网络分区下的容错性,然后优化消息投递,以最小化系统内发送的消息数量。 通过广播挑战之后,你将实现一个只增计数器,即 g-counter。这个挑战的棘手之处在于,你需要构建在 Maelstrom 的顺序一致性键值存储之上。 然后你会通过构建一个类似 Kafka 的系统,深入复制日志的世界。这个挑战将建立在 Maelstrom 提供的线性一致性键值存储之上,但你不仅需要让它正确,还需要让它高效。 最后,你将以完全可用事务挑战收尾,在这个挑战中,你将在不同的一致性级别上构建一个事务型数据库。 过去一年,我们发展得极为迅猛。这很好。但这也意味着我们一直在招人,而招聘很难。 我们采用盲简历招聘,基于工作样本测试:我们让人写代码、设计系统,然后根据评分标准给这些提交打分。我们为早期职业、中级和团队负责人级别的开发者制定了标准。但我们没有针对招聘 staff 工程师的有力标准。 于是我们开始 brainstorming。在之前的工作中,我们中有些人曾在一系列名为 Cryptopals 的密码学挑战上取得过成功,所以我们想,不如试试类似的东西,但带点分布式系统的味道。 听起来很棒,但你怎么真正测试分布式系统,来判断一个人是通过还是没通过?好几个星期,我们写了一版又一版,但没一个感觉对。 终于,我们有了一个绝妙的主意。去找一个以分布式系统验证为生、呼吸都带着它的人!这个人就是 Kyle Kingsbury。 与 Kyle 一起做完这些挑战后,我们意识到它们太好玩了,不能只留作内部评估工具。所以我们把它们开放出来,任何人都可以玩。 如果你面对级联故障嗤之以鼻,如果你能把一致性级别玩弄于股掌之间,如果你把 k8s.af 的事后复盘当作睡前故事读给孩子听,那你可能有兴趣试试我们最难的挑战。 我们保留这最后一个挑战,用来评估 Fly.io 的 staff 工程师。所以,如果你觉得自己能迎接这个挑战,我们很乐意和你聊聊。
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。