
开发者自建邮件系统并获独立IPv4地址块
来源标题:Self-hosting email the hard way from your own routable IPv4 block up
开发者更新了运行近30年的自托管邮件基础设施,并通过法国朋友 Thomas Gazagnaire 的帮助获得了专属 IPv4 地址分配。文章详细介绍了自建邮件栈的完整方案,涵盖 IP 声誉管理、防机器人、Sieve 投递,以及 SPF、DKIM、DMARC、SRS 等发信机制。作者认为自托管能让用户真正掌控自己的数据,避免网络日益集中于少数公司。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
继“重野化网络”之后,我更新了我和 Nick Ludlam 自 1997 年以来一直运维的 Recoil 自托管基础设施。最令人兴奋的是,这现在成了“硬核方式自托管邮件”——得益于我的好友 Thomas Gazagnaire 在法国帮忙,我们拿到了属于自己的专用 IPv4 地址段并完成了路由!
这篇文章技术性较强,面向有兴趣搭建自己邮件栈的读者。我们会聊到为什么值得折腾自建邮件;接收邮件(涉及 IP 声誉、获取自有 IPv4 地址段、拦截机器人以及 Sieve 投递);如何通过 SPF、DKIM、DMARC 和 SRS 可靠地发送邮件;用户如何通过 Dovecot IMAP 和 Roundcube webmail 访问;最后还会谈谈还有哪些待办事项,以及对未来研究想法的一些思考。
对于刚接触系统与网络的人来说,这是一段极具教育意义的经历。运营自己的服务器正是我学习互联网运作方式的方式,也是我当年进入开源世界的途径——安装 OpenBSD,然后给 PHP 修 bug!
更广泛地说,自托管对于自主掌控自己的数据很重要,因为网络正稳步向少数几家巨头集中。2023 年的一项分析显示,有两家公司基本上可以读取你所有的邮件流量:
所以总的来说,谁能读你的邮件这个问题,答案基本上就是——没错——“Google 和 Microsoft”。即使你的域名不使用他们的邮件服务器,你发信的对象多半也在用。
—— MX diversity,Jan Schaumann,2023
邮件正处于我们数字生活的中心;想想看,如果你的邮箱被劫持或被钓鱼,有多少在线账户可以被重置。从很多方面来说,它就是把所有其他在线服务连接起来的那个服务。
自托管邮件相当费功夫,但这些工作分散在很长一段时间里,你只需要持续盯着它就行。我和 Nick Ludlam 大约在 1998 年夏天为 NASA 工作时开始了我们的托管冒险。2002 年我们第一次大迁移服务器时,Nick 和 Chris Luke 把我们的第二台服务器装上一辆破旧的白色小面包车,送到 Easynet 托管——就在伦敦第一家网吧的门外。
如果你决定自己试一试,你需要找到稳定的互联网托管(自家网络不是最好的选择,原因我们会在后文看到),同时还要积累声誉。幸运的是,如今找到稳定的互联网比 90 年代末容易多了,我们用的是 Mythic Beasts,他们非常出色、可靠,而且就在本地。
我会在本文中解释我们如何获得自己的专用 IPv4 地址段,以帮助为我们的个人邮件建立一个完全独立的、高送达率指数!虽然对大多数用户来说邮件看起来像一个服务,但它实际上是三项独立的活动:邮件接收、邮件提交和邮件访问。我会深入介绍这三项在 Recoil 上目前各自如何运作,希望对你自己搭建环境有所帮助。
互联网上的每个域名(比如 recoil.org)都运行一个 SMTP 服务器,用来接收来自其他服务器的邮件。你可以通过查询某个域名的“MX”DNS 记录来找到这台服务器:
$ host -t mx recoil.org recoil.org mail is handled by 10 pork.recoil.org.
这表明互联网主机 pork.recoil.org 必须接受互联网上任何希望向 <email>@recoil.org 投递邮件的服务器发起的连接。
核心难点在于,SMTP(诞生于更信任他人的 1980 年代)并没有强制内置的可信度证明。任何人都可以声称自己是任何人,我们收到的邮件中的“发件人”可以被轻易伪造。
IETF 的应对方式是,多年来逐步叠加了一整套检查机制,发件人必须通过这些检查,否则就会被收件方过滤。如果我们把这些身份检查搞砸了,我们的邮件就无法在互联网上可靠送达,这个服务也就没什么用了。
垃圾邮件从互联网任何地方发送的成本都很低,因此随着网络普及自然增长。Paul Vixie 在 1997 年提出了基于 DNS 的黑名单。此后涌现了许多类似名单,由 Spamhaus、Spamcop 和 Barracuda 等组织运营,它们把关于僵尸网络、被入侵主机和垃圾邮件发送者的报告汇总成列表,任何邮件服务器都可以查询。
DNS 黑/白名单协议(RFC 5782)非常简单,可以直接从命令行查询:
$ dig 2.0.0.127.zen.spamhaus.org +short # testing address 127.0.0.2 127.0.0.10 127.0.0.4
这是一个 localhost 测试地址,但 RBL 中存在 DNS 记录意味着那台服务器可疑。这正是拥有自己 IPv4 地址的真正价值所在。通过这些 RBL 积累的邮件声誉是针对地址而非域名的。理论上,你用于自托管邮件的 IP 地址可能是云服务商回收给别人的,因而被他人的不良行为污染。(更新:Ryan Gibb 指出,由于这些列表通常按 IP 段工作,在多租户云中你的 IP 邻居也会影响你的声誉。他报告说自己用的 Hetzner 会手动将 SMTP 服务器加入白名单以尽量减少滥用)。
相比之下,全新的 IPv4 地址一开始是中立的,通过持续、规范地发送邮件来积累声誉。要完全掌控这一点,唯一的办法就是掌控地址空间本身,这就是为什么 Recoil 团队现在有了自己的 IPv4 地址段:185.33.27.0/24!
由于 IPv4 地址枯竭,获得自己的地址分配需要排一条很长的队。RIPE NCC 是欧洲的区域注册机构,于 2019 年 11 月用完了未分配的 IPv4 空间,此后直接从 RIPE 获得分配的唯一途径就是通过小规模分配的等待名单。
虽然 IPv4 地址已经用完,但 RIPE NCC 成员仍然可以申请单个 /24 分配(256 个地址)。[...] 申请会被加入等待名单,待我们未来回收 IPv4 地址时再处理。[...] 这
(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。