Solarian发布开源Python机器人框架,支持从仿真到部署全流程
来源标题:Show HN: Solarian – Open-source Python framework for AI robots
Solarian是一个开源Python机器人框架,可在同一套技术栈中完成机器人的构建、仿真、遥操作、训练与部署。它采用模块化架构,机械臂、夹爪、摄像头等模块各自以独立进程运行,并内置逆运动学求解。框架还提供围绕视觉语言模型的AI控制器,可将任务规划与物理技能结合执行。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
开源机器人框架 用一个可扩展的 Python 框架完成机器人的构建、仿真、遥操作、训练和部署——从硬件到 AI 控制,一套技术栈全部搞定。 $pip install solarian 构建可学习机器人所需的一切 智能体控制器pick("red cup")1 Hzcontroller技能pick_object_policy(target)30 HzGPU 服务器逆运动学pose → joints500 HzRaspberry PiVLMAnthropicOpenAIGemini 实时控制 模块、运动学和 AI 规划器共享同一个控制循环,各自以所需的频率运行。 实时模块 Solarian 采用模块化架构:机器人由机械臂、夹爪、相机等模块组成。每个模块运行在独立的进程中,以各自的频率工作,因此 500 Hz 的机械臂永远不会等待 30 Hz 的相机。 内置运动学 直接命令末端执行器,模块会在每个 tick 求解逆运动学,并通过正运动学实时报告位姿。 AI 智能体控制器 一个围绕任意视觉语言模型的智能体框架:在聊天中给它一个任务,它会规划任务并将你的物理技能作为工具来运行,每个技能以各自的频率执行。 $ solarian install …solarian-arm1solarian-kochsolarian-policy-lero…solarian-ur5simrealis_sim = False 仿真、即插即用、复用 构建一次机器人,即可在 MuJoCo 或硬件上运行,并通过硬件和技能插件进行扩展。 内置仿真 将机器人声明为一个类,其模块作为属性。设置 is_sim = True,相同的模块和 YAML 就会驱动 MuJoCo 世界而非硬件。 即插即用硬件 Solarian 通过插件进行扩展。舵机驱动、机械臂、夹爪和相机通过 solarian install 安装,配置一并包含,而 solarian create-plugin 可创建你自己的插件。 即插即用技能 技能的安装方式相同:一个运动规划、一段脚本化例程,或一个学习到的策略,可在任何暴露相同动作的机器人上运行。 robotrecordmp4 + parquetdatasetversionsv3trainPolicyTrainerserverun-servicepolicy 学习策略 从遥操作演示到训练好的策略驱动机器人,全程不离开框架。 会话录制 solarian record 将每个相机保存为 mp4,每个信号以其原生频率记录,确保不丢失质量。 数据集管理 镜像、拆分、裁剪和合并 episode 为新版本,无需复制或丢失数据。 策略训练与服务 solarian train 可在本地、Modal 或 Solarian Base GPU 上运行扩散模型、ACT 或你自己的训练器。随后 solarian run-service 将策略提供给技能使用。 robot.yamlarm: frequency: 500 port: /dev/ttyACM0calibrationclass ArmObs(ModuleObs):joints: JointStatepose: Posewrist: Imagewiredatasetreplaypolicy 开发者工具 每个机器人项目都需要的组件,已内置。 类型化观测与动作 绑定到模块的 Pydantic schema。传感器读取的内容就是你流式传输、录制、回放并喂给策略的内容。 Hydra 配置 每个命令都读取组合的 YAML:robot.yaml、controller.yaml、每个模块一个文件。可从命令行覆盖任何值。 校准工具 solarian calibrate 记录关节限位和初始位姿。延迟命令可测量硬件上相机和执行器的延迟。 搭建项目脚手架,从插件挂载硬件模块,然后运行中继服务器、机器人循环和控制器——每个都可以运行在任何合适的机器上。 探索 CLI terminal
搭建新项目
create-solarian myrobot cd myrobot
安装插件
solarian install <plugin>
运行三个节点
solarian run-server solarian run-robot solarian run-controller 构建于快速、生产级工具的基础之上 高吞吐的 PUSH/PULL 和 PUB/SUB socket 在节点之间传输每个动作和观测。 可组合的 YAML 配置,适用于每个命令、每个模块和每个连接配置。 对策略、视觉语言模型和机器人端推理提供一流支持。 对配置、观测、动作和进程间消息提供强类型支持。 从概览开始,或直接安装 Solarian 并搭建你的第一个项目。
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。