Handshake一年建成近10亿美元AI训练数据业务,揭秘前沿实验室买什么
来源标题:What Frontier Labs Buy: A Data Deep Dive with Handshake AI — Garrett Lord & Team
Handshake在约一年内将AI训练数据业务做到近10亿美元年化毛收入,创始人Garrett Lord与团队详解前沿实验室的采购需求。团队展示了面向生物学、金融和对齐领域的强化学习环境,并介绍了银行场景的Excel评分器与数据集评估方式。节目还拆解了实验室如何采购和测试新数据集。
以下正文由 AI 翻译自 Latent Space(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
这是我们首次深入探讨一家 AI 数据公司。在大约一年时间里,Handshake 建立了一项 AI 训练业务,年化总营收接近 10 亿美元。前沿实验室到底在买什么?Garrett Lord 与我们一起,带来那些在生物学、金融和对齐领域构建强化学习环境的人。
一个 AI agent 往一个 Excel 标签页里填满了一到一百万的每一个数字。一个早期评分器找到了它想要的净收入数字,给了它一分。而投资银行家会检查什么?
在场嘉宾
AI 数据业务——Garrett Lord、Sahil Bhaiwala 和 Nishant Ranka 在节目开头和结尾讨论专家数据市场。
生命科学——Nick Magazine 和 Jonas Mueller 把凝胶和脑组织任务放到屏幕上。
金融——Collin Schweiker 和 Sahil Bhaiwala 带我们了解 Project Falcon 及其 Excel 评分器。
对齐——Steve Kelling 和 Nishant Ranka 跟随 agent 的工具调用,走过安全模拟。
章节
0:00 走进 Handshake AI 0:39 Garrett、Sahil 和 Nishant 谈前沿训练数据 5:15 如何为 agent 构建一个银行环境 13:07 前沿实验室如何购买数据 15:51 实验室如何评估一个新数据集 20:01 在开源模型上测试训练数据 27:38 评分标准在哪里比不上专家判断 31:30 Nick 和 Jonas 介绍 VIALS 基准 35:52 读取分子结构和质粒图谱 43:48 训练视觉模型解读科学图像 47:17 任务一:读取凝胶上的条带 50:59 任务二:在脑组织中寻找坏死 55:49 Python 工具能帮助模型“看见”吗? 1:02:52 生物学模型能自我改进吗? 1:06:19 生物学实验室能从 Handshake 买到什么 1:12:33 与 Collin 和 Sahil 一起的 Atlas Finance 1:18:56 走进一家模拟投资银行 1:25:45 agent 的财务模型哪里出了错 1:31:18 银行家如何给电子表格打分 1:41:12 惩罚陷阱、依赖门控和部分得分 1:46:41 一个 agent 如何钻了 Excel 评分器的空子 1:48:52 什么能让 AI 银行家变得有用? 1:54:48 与 Steve 和 Nishant 谈安全与对齐 1:58:25 CAREBench 与拒绝的局限 2:04:42 安全反馈如何进入模型训练 2:07:21 当 agent 发错文件时 2:11:14 一份贷款申请测试公平放贷 2:16:09 为企业设计私有基准 2:25:37 领导团队谈 Handshake 的使命 2:28:36 当企业需要自己的模型 2:33:03 算力与专家数据的市场 2:39:12 实验室为什么保留评估任务 2:43:01 Handshake AI 的招聘
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。