返回资讯中心
外部精选
软件工程
#开发者实时流

评论:封锁开放网络无法阻止恶意机器人

来源标题:Breaking the openweb won't stop the bad bots

针对AI抓取数据的恐慌,部分传统媒体和政策制定者主张限制自动访问、要求身份识别,作者认为这是错误方向。真正的问题是#dotcons和AI行业大量提取开放公共信息、绕过原始来源构建封闭商业产品,构成新一轮圈地。作者主张应让自由比控制更容易使用,而非封锁工具。

Hacker News 最新speckx2026/11/11 · 6 天前14 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

把技术主流化会让你更容易被利用,而另类技术则让自由变得难以使用,这很有意思。一个是为了控制而建的——而且在这方面做得非常好。另一个是为了自由而建的——但在实现自由方面往往表现糟糕。这就是我们面临的真正#techshit问题,我们需要让自由比控制更容易使用。

最近关于AI抓取的#fashionista恐慌,暴露了我们在理解和捍卫#openweb方面的一个真实问题。面对#dotcons和#AI行业咄咄逼人的商业数据提取,部分传统媒体机构和主流政策制定者的回应是限制自动化访问、要求身份识别,并对谁能收集#4opens可用信息施加新的控制。这是错误的方向。

我们确实存在一个真实的问题:#dotcons提取开放数据流、大量公共信息,把成本强加给创建、托管和维护这些信息的人。他们拿走#openweb产生的价值,喂入专有系统,然后构建绕过原始来源的封闭商业产品。这是又一轮圈地。

但关掉让#openweb运转的工具不是解决方案,这只会摧毁我们对抗这种圈地所需的基础设施。原生#openweb依赖开放数据流,自动爬取、抓取、索引、归档和再分发并不是对互联网的某种新滥用。它们是原生#openweb发展方式的基本组成部分。

搜索引擎、独立新闻、公共利益研究、无障碍项目、安全监控和档案馆,全都依赖收集和处理公开可用信息的能力。Internet Archive的Wayback Machine已保存了超过一万亿个网页。调查记者利用自动收集来揭露政府中的利益冲突。研究人员用它来考察歧视、虚假信息和企业行为。

这些活动需要#KISS能力,即无需向每个网站所有者请求许可就能在网上追踪信息。有时匿名是必要的,如果一名调查权势利益的记者、研究人员或活动人士必须表明身份并解释自己在找什么,调查本身就受到了损害。一个#openweb不能在我们查看、收集、保存和分享公共信息之前,依赖向每一个守门人请求许可。

问题在于提取,而不在于开放——我们需要区分两种截然不同的事情。一种是草根的、公共利益的对自动化工具的使用,目的是让信息可获取、保存知识、连接社区。另一种是#dotcons的工业级商业提取,那是一个灰色地带,他们拿走开放web的集体产出,集中到私有数据库中,用来构建专有的#closedweb服务。这些不是同一种活动。

问题不在于信息自由流动,而在于这些流动所创造的价值正被圈占和私人攫取。让每个爬虫表明身份并不能解决这个问题。商业抓取器可以表明身份,却仍然用请求压垮服务器。与此同时,独立的档案工作者或记者可能仅仅因为无法安全披露身份就被吓退,放弃做正当的工作。我们需要监管有害行为,而不是把开放的基本机制定罪。

#geekproblem在于试图控制混乱而不是修复它。面对复杂的社会和技术问题时,本能反应是再引入一层技术控制、身份识别和许可。但原生#openweb建立在一种不同的理解之上:分布式参与、开放协议、独立服务器,以及跨越组织边界连接信息的能力。

我们应该加强那些让独立网站、档案馆和社区得以存续的基础设施。#OMN所增添的是重建公地。答案不是退回到封闭平台、私有API、基于许可的网络或又一代企业控制的基础设施。我们需要重建共享的数据流,这不是假装对公共信息的每一次使用都无害。而是要建立社会和技术能力,去区分有益的参与和破坏性的提取。

不要重蹈覆辙——长期以来,我们一直允许#dotcons拿走原生#openweb的价值,同时卖给我们越来越封闭的替代品。现在,面对后果,有些人想要限制当初让互联网变得有用的那种开放性。我们不能允许对商业圈地的回应变成又一轮圈地。原生#openweb从来都不完美,它有技术债务、薄弱的治理、资金问题和社会冲突。但它给了我们一些我们基本上已经失去的东西:通过开放信息流建立集体力量的可能性。我们需要恢复这一点。

对付坏机器人的答案不是破坏网络,对付商业提取的答案不是封闭公共信息,对付平台权力的答案不是另一个拥有更多控制的平台。路径很简单,我们需要重启#openweb,而不是关掉它。这意味着重建草根社区、共享基础设施和集体治理,让开放性能生长出真正的社会价值。

https://www.techpolicy.press/breaking-the-open-web-wont-stop-the-bad-bots

A part of the OMN View all posts by hamish campbell

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →