返回资讯中心
外部精选
软件工程
#开发者实时流

用 Python 写 TCP 栈:一次从零实现网络协议的实验

来源标题:What happens if you write a TCP stack in Python? (2014)

作者在 Hacker School 期间用 Python 和 scapy 库实现了一个简易 TCP 栈,目标是抓取一个网页。他先手动构造 SYN 包与 Google 完成 TCP 握手,再逐步用代码复现整个过程。实验不涉及错误处理,仅验证基本协议原理。

Hacker News 最新zenincognito2026/11/12 · 5 天前14 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

在Hacker School期间,我想更深入地理解网络,于是决定写一个微型TCP栈作为学习的一部分。比起C语言,我用Python要顺手得多,而且我最近发现了scapy这个网络库,它让发送数据包变得非常容易。我并不太在意完善的错误处理之类的事情,我只想成功获取一个网页然后宣布胜利 :)

我从和Google做一次TCP握手开始!(这段代码不一定能正确运行,但能说明原理。)我给每一行都加了注释。

很简单,对吧?我们把它写成代码。

我的本地网络IP

src_ip = "192.168.0.11"

Google的IP

dest_ip = "96.127.250.29"

IP头部:这是从我这里发往Google的

ip_header = IP(dst=dest_ip, src=src_ip)

给我自己指定一个大随机端口号(59333),

给Google指定80端口 "S"标志表示这是一个

SYN包

syn = TCP(dport=80, sport=59333, ack=0, flags="S")

把SYN包发送给Google

scapy用'/'来组合数据包和头部

response = srp(ip_header / syn)

添加序列号

ack = TCP(dport=80, sport=self.src_port, ack=response.seq, flags="A")

用ACK回复

srp(ip_header / ack)

等等,序列号?

这些序列号到底是怎么回事?TCP的核心目的就是确保当某些数据包丢失时能够重发。序列号是一种检查你是否漏掉数据包的方式。假设Google给我发了4个数据包,大小分别是110、120、200和500字节。假设初始序列号是0。那么这些数据包的序列号就是0、110、230和430。

所以如果我突然收到一个100字节、序列号为2000的数据包,那就意味着我漏掉了一个包!下一个序列号应该是930!

Google怎么知道我漏掉了数据包呢?每次我从Google收到一个数据包,我都需要发送一个ACK("我收到了序列号为230的数据包,谢谢!")。如果Google服务器发现我没有对某个数据包发送ACK,它就可以重发那个数据包!

TCP协议极其复杂,里面有各种各样的速率限制逻辑,但我们不打算讨论那些。对于这篇文章来说,这就是你需要了解的关于TCP的全部内容!

如果想要更深入的解释,包括SYN包如何影响序列号,我觉得Understanding TCP sequence numbers讲得非常清楚。

于是我运行了上面的代码,然后遇到了问题。它没有工作。但方式还挺搞笑的!我什么响应都没收到。我在Wireshark(一个监视数据包的绝佳工具)里看了一下,情况是这样的:

我:SYN google:SYNACK 我:RST

等等,什么?我从没发过RST包啊?!RST的意思是"停止连接,结束了"。这根本不在我的代码里!

这时我想起来,我的电脑内核里已经有一个TCP栈了。所以实际发生的事情是:

我的Python程序:SYN google:SYNACK 我的内核:搞什么鬼,我从来没要求过这个!RST! 我的Python程序:... :(

那么怎么绕过内核呢?我和讨人喜欢的Jari Takkala聊了聊,他建议用ARP欺骗来假装我有一个不同的IP地址(比如192.168.0.129)。

我:嘿路由器!把发给192.168.0.129的数据包发到我的MAC地址 路由器:(默默地照做了) 我的Python程序:SYN(来自192.168.0.129) google:SYNACK 内核:这不是我的IP地址!<忽略> 我的Python程序:ACK 耶

成功了!好的,太棒了,我们现在可以发送数据包并且收到响应,而不会被内核干扰了!太棒了。

这中间还有一步,我修复了大量烦人的bug,那些bug导致Google不肯把http://google.com的HTML发给我。我最终把它们全部修复了,取得了胜利!

一切正常工作之后,我又用Wireshark看了看来回发送的数据包。大概长这样:

我/google:<TCP握手> 我:GET google.com google:100个数据包 我:3个ACK google:<开始重发数据包> 我:又几个ACK google:<重置连接>

来自Google的数据包序列和我的ACK看起来大概是这样的:P P P A P P P P P A P P A P P P P A。Google发送数据包的速度远远超过我的程序能够跟上并发送ACK的速度。

然后,搞笑的是,Google的服务器会认为存在网络问题导致我无法对它的数据包发送ACK。最终它会判定存在连接问题,然后重置连接。

但连接明明是好的!我的程序完全在响应!只不过我的Python程序太慢了,无法在它期望的毫秒级时间内响应数据包。

(编辑:这个诊断似乎不正确 :) 你可以读一些讨论了解实际可能发生了什么)

如果你真的要写一个生产级的TCP栈,别用Python。(意外吧!)另外,TCP规范真的很复杂,但即使你的实现极其粗糙,也能让服务器回复你。不过它真的能工作,我当时真的非常开心!ARP欺骗非常不稳定,但我用它写了一个curl的版本,大约25%的时候能正常工作。你可以在https://github.com/jvns/teeceepee/看到所有荒诞的代码。

我觉得这实际上比用C这样合适的语言去写TCP栈要有趣得多、也有教育意义得多 :)

结对编程太棒了!除非……它不棒的时候。

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →