开发者推出BLUPE平台,可在本地模拟环境测试机器人模型控制真机机械臂
来源标题:I made it easy to see how well robotics models acutally work
开发者发布BLUPE运行器,让用户通过本地仿真环境用AI模型控制真实机械臂,无需连接物理机器人即可先做测试。用户可克隆GitHub仓库并运行run-playground.sh启动,支持Astra、Opus、GR00T等模型及自带LLM订阅,运行中可随时修改提示词干预决策。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
本地模拟 · 未连接实体机器人 用 AI 控制真实机械臂。观看、输入提示、运行。API 文档 · 本地运行 · ASPIRE README 克隆 https://github.com/andlyu/blupe-remote-yam.git 并启动 ./run-playground.sh。帮我用我的订阅连接 Codex 或 Claude。 实时画面,同步呈现。正在检查视频流 在运行结束前,你的评价为临时状态。 视频回放将在五秒后打开。你可以稍后修改评价。 聊天 动态 访客聊天 关闭 与其他观看者聊天。消息是公开的。 服务器重启后,最近消息会被清空。 选择模型并运行通过你自己的 LLM 订阅运行 在线运行通过订阅在本地运行用 Astra 运行用 Opus 运行用 GR00T 运行 你可以在这里介入,并随时更新提示。更新会引导下一次决策。已经发出的动作可能会执行完毕;用“停止”来中止。 现有的 BLUPE 运行器负责收集观测并调用模型。 兼容 Responses 的工具和 RGB 输入。控制器会直接调用你的公开 HTTPS 端点,不会发送 API key。如果你的服务需要密钥,请使用你自己带认证的代理。 选择 Astra 或 GPT 6.1+,或者 Claude Opus 5.5+。你也可以直接输入新的模型 ID。 0 表示禁用自动重试;1–3 限制实时恢复尝试的次数。该设置会保存在此浏览器中,供下次提交使用。当前运行仍保持其已记录的次数上限。更改此设置不会重新运行旧任务。 应用于你的下一次运行。更高的 effort 可能改善决策,但耗时更长。 稀疏调用只保留最新完成的第 1、2、3、5、7 和 10 次调用。普通调用保留完整运行历史。 快速模式会在可用时使用提供商更快的推理层级。它可能消耗更多额度;思考 effort 与机械臂速度是分开的。 已在此浏览器中针对该模型保存。应用于你的下一次运行。机器人限制仍然适用。 发送配对好的彩色与深度图像,并附带相机标定。Astra 可以按相机像素查询实测深度。 你已经用完了免费的访客运行次数。使用你的 API key 或本地运行以继续。 在此生成新 key 请确保你在这里有 OpenAI 额度 仅发送到你的端点。如果你的服务器不需要认证,请留空。 首次登录:./run.sh --codex-login --provider codex 首次登录:./run.sh --claude-login --provider claude 更大的移动会被额外的路径点放慢,从而保留路径和最终目标。 模型观察相机、选择动作,并等待机器人反馈后再做下一次决策。 你的名字、任务和可读的 Astra 对话将对所有观看者可见。 这个项目非常新。我们很想跟进了解你的体验。 模型可能需要一些时间。我更希望在运行完成后通过邮件观看加速视频,而不是在运行过程中观看。 要在本地用 Codex 开发和运行你自己的 ASPIRE 程序,请遵循 ASPIRE 快速入门 README。 将以下提示粘贴到你喜欢的编码助手中: 检查连接会消耗少量订阅用量。 机器人上传视频后即可回放。 本次运行中记录的提示、模型回复和机器人反馈。下载日志以获取完整的请求与响应数据。 邻近点具有相似的任务描述;这并不能确立相同的起始条件或物理难度。小幅偏移区分了重复尝试。 绿色:成功。红色:失败。琥珀色:不确定。空心:无一致结果。 选择“绘制框”,然后拖动以选取一个 3D 区域。拖动空白处可环绕视角;滚动或双指缩放可缩放。拖动一个彩色方块可推或拉某个盒面。盒坐标轴:X 红色,Y 绿色,Z 蓝色。 在触摸屏上,将一个点拖入指针中,或点按一个点进行预览;点按“打开运行”可查看完整回放。使用鼠标时,悬停即可预览,点击即可打开。拖动可旋转;双指缩放或滚动可缩放。方向键旋转,+/− 缩放,Home 重置。使用 [ 和 ] 聚焦每次运行;Escape 关闭预览。空心点没有一致结果。表格提供了无障碍替代方案。 悬停可快速预览。选择一个录制以观看完整运行。 正在处理你的回放。这通常需要大约一分钟。 你可以在处理期间关闭此窗口并运行另一个任务。 如果大小合适,我们会将此回放作为 MP4 附件发送,并附上观看链接。
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。