产品派
返回

破晓智能发布SeePhys Hub全身全模态采集系统

AI量子位2026/10/14 12:51:32
AI 导读

机器人学习正从Ego第一视角视频走向更完整的身体交互数据。EgoScale已使用两万多小时人类操作数据,Dyna-2则开展百万小时预训练,但视觉记录往往难以覆盖迈步、弯腰、转身、姿态变化及接触力度等信息。

10月14日,破晓智能联合天珑移动发布SeePhys Hub。系统由四目头环、两个腕部手环、三个腰腿动作追踪器和可选触觉手套组成,利用相机、IMU与UWB融合恢复全身姿态,并记录手部接触压力;头环提供360°视野,腕部相机补充近距离细节,设备同步精度不超过0.5毫秒。

这套方案通过少量身体节点补足视觉盲区,例如记录取出冰箱物品后转身关门等连续动作。触觉手套还能记录抓取葡萄、水杯等物体时的压力变化,帮助模型关联身体运动、手部接触与环境变化。配套平台支持数据解析、清洗、动作切分、语义标注、场景重建、姿态估计、手部追踪和动作重定向。

产品定位介于高精度动捕及真机数据,与轻量但信息有限的人类视频之间。头环重量不超过220克,单个腕部手环不超过75克;手套可按任务选配,以降低防水场景中的操作影响和传感器噪声。团队还在研究从视觉估计触觉,以扩大可用数据来源。

创始人兼CEO杨朔出生于1998年,是哈尔滨工业大学(深圳)长聘教授、博士生导师,26岁成为国内人工智能领域最年轻的教授博导。其团队核心成员九成以上毕业于清华、北大、港大和哈工大等高校,研究覆盖全模态大模型、世界模型、数据处理与硬件研发。团队曾于2026年5月公开EgoTouch和TouchAnything,并用TouchWorld在插拔插头、擦锅、抽纸等真机任务中结合触觉反馈修正动作。

SeePhys Hub将研究范围扩展至全身运动。破晓计划在2027年推出全模态世界模型,先在工业、餐饮零售等场景验证,目前不急于自研机器人本体,而是使用通用本体并与本体厂商、场景方合作。天珑移动负责供应链、成本和质量保障,客户可选择购买硬件、自行处理数据,或使用本地部署及云端完整方案。

具身智能世界模型数据采集触觉交互

本文基于公开渠道信息整理,内容可能存在不准确或遗漏之处,不代表本站立场,如内容涉及侵权或错误,请联系我们处理。

阅读原文