Feature Reading

后GPT-6时代,具身数据怎么做?Ropedia发布Xperience 2,给出下一代数据基石金标准

将文章核心主题、阅读路径与关联内容进行更清晰的组织,帮助用户以更流畅的节奏进入正文。

后GPT-6时代,具身数据怎么做?Ropedia发布Xperience 2,给出下一代数据基石金标准
Sports Insight

当前位置

当前正在查看文章详情,可沿路径返回栏目页或继续切换其他内容。

后GPT-6时代,具身数据怎么做?Ropedia发布Xperience 2,给出下一代数据基石金标准

11 月 9 日,Anthropic 发布 Claude Fable 5.2。据报道,它在机器人控制基准 RoboDojo 上拿到 64.9% 的成绩,是上一代 Fable 5.1(27.6%)的两倍多。而就在两个月前,GPT-6 Astra 刚以 22.48% 的平均成功率登顶这一榜单,超过全部 40 个公开策略。 通用大模型的具身能力正以惊人的速度提升,但榜单上的分数,还不等于真实世界里的能力。在一项联合研究 [1] 中,GPT-6 Astra 被部署到 8 种真机配置上:插插头 11 次尝试全部失败,长程导航找物 23 次尝试中仅成功 9 次。研究者的判断是,它已具备初步的具身能力,但距离实用仍有差距。 如何让通用大模型更好地控制机器人,在真实环境中连续完成更长、更复杂的任务?模型既需要可供学习的行为示范,也需要能执行任务、积累经验的环境。大模型有 Scaling Law,物理智能的 Scaling Law 又在哪里?要回答这个问题,首先得弄清楚:该扩展怎样的环境与行为数据,又该如何持续生产和使用? 近日,Physical AI 初创公司 Ropedia 正式发布 Xperience 2,给出了自己的答案: Ropedia Xperience 2 是一套面向 Physical AI 的真实环境与行为数据集,它将真实场景扫描与人的第一视角活动记录相结合,在同一度量坐标系中对齐场景几何、录像、轨迹和身体姿态。 基于这些数据,Ropedia 将人的动作转换为机器人轨迹,并将扫描场景转换为可交互的仿真环境。 Ropedia 希望以这种真实采集、精准对齐、覆盖多样且可复用的环境 - 行为一体化数据,建立下一代具身数据的 “金标准”,为后 GPT-6 时代物理智能在环境与行为数据上的规模定律奠定数据基础。 技术报告:Ropedia Xperience 2: A Gold Standard for Scaling Physical AI Environments and Behaviors 报告链接:https://arxiv.org/abs/2611.17060 项目主页:https://ropedia.com/xperience/2-research 数据集:https://huggingface.co/datasets/ropedia-ai/Ropedia-Xperience-2 1,812 个场景组成 Xperience 的 X。 物理智能的「金标准」数据:环境与行为,缺一不可 扫描、记录与对齐:让每个行为有真实环境参照 Xperience 2 为每段任务录像保留对应的场景重建。视频中的相机轨迹、手部和全身动作被放进同一个三维坐标系,与房间的几何和布局对齐。使用者可以回看人怎样在这个房间里行动,也可以继续利用这些记录构建机器人任务。 以把杯子放进橱柜为例,视频能记录取杯、开门、放入和关门的过程,供模型学习动作和顺序。机器人真正做这件事时,还需要知道杯子在哪里、柜门朝哪边开、自己的手臂能否够到,以及怎样判断任务完成。这些信息需要结合场景的几何和物体状态来确定。光有录像,机器人还没有一个能试做这项任务的环境。 而只有仿真场景,同样不够。仿真场景让机器人有了练习的地方,人的示范则能提供起步的方法。缺少示范时,抓杯子的位置、开柜门的方向和放杯子的动作都可能需要反复探索,还要设计相应的奖励。任务步骤越多,这样训练的成本往往越高。 现有数据集通常侧重其中一类。ScanNet++、Realsee3D 和 DL3DV-10K 提供三维场景重建和相机位姿,没有对应的人类第一视角任务录像;EPIC Fields、Nymeria 和 HD-EPIC 记录了人的活动和相机位姿,但大多不提供场景网格。 Xperience 2 把场景和人的示范放在一起。两者对齐后,人的动作有了明确的空间参照,可以根据机器人的身体结构转换成运动轨迹,再放回同一场景中检查。原始录像由此可以继续用于机器人的动作研究。 场景完成交互配置后,还可以设定杯子的位置、柜门状态和机器人起点,让机器人在里面执行任务。没抓住杯子、把杯子放在柜子边缘,或者忘了关门,都能根据物体状态判定并记录。失败后重新加载场景,就能再试一次;换一组初始条件,还可以继续采集新的轨迹。 录像与场景对齐后的各层数据:网格、3DGS、第一视角视频、头部轨迹、双手和全身姿态,以及三个时间尺度的活动标注,位于同一个度量坐标系中。 这套采集延续了 Ropedia 在第一视角数据上的积累。此前的 Xperience-10M 包含约 1,000 万个真实世界交互片段、1 万小时第一视角视频与音频。Xperience 2 在这些行为记录之外增加了场景扫描与空间对齐,让每段活动都有对应的真实环境。同一次扫描可以供这个场景中的多段

about image
觉得有用?分享给朋友

让更多人看到这篇内容

推荐阅读

Search
热点新闻
刚扯完离婚证我就调去了绝密单位,前夫带着新欢上门炫耀,等看清我桌上留下的特殊调令,他脸色白得像张纸
刚扯完离婚证我就调去了绝密单位,前夫带着新欢上门炫耀,等看清我桌上留下的特殊调令,他脸色白得像张纸

离婚证到手第三天,曾高远就带着新欢找上门了。 他穿了件新买的深蓝夹克,领口翻得板正,皮鞋擦得能照见人影。 新欢叫蔡怜梦,挽着他胳膊,指甲盖上镶着碎钻,笑起来嘴角往上挑。 两人往我原单位前台一站,曾高远拿指节敲了敲台面,说找谢明美。 前台小姑娘查了电脑,抬头说:“谢明美调走了,上礼拜就办完手续了。” 曾高远脸上的笑僵了半截。 他托人拐了三个弯,问到个新地址。 大门带岗哨,进出要刷卡。 第二次去,他谎

6比3!七分垫底队掀翻争冠热门,金骑士主帅:开球时就输了
6比3!七分垫底队掀翻争冠热门,金骑士主帅:开球时就输了

一场6比3,赢球的是赛前21场只拿7分的温哥华加人,输球的是争冠热门维加斯金骑士。金骑士主帅瑞安·克雷格赛后把话说得很直:比赛在开球那一刻就输了。 “在NHL,你每晚都必须拿出表现才能赢球,”克雷格说,“我们有过追回来的机会,但一旦你在追分,犯错的余地就非常小。”他还原了比赛走势:球队开局其实不错,前五次射门都来自金骑士,但布雷特·豪登的一次犯规成了转折点,对手的第一脚射门就进了。“我们把自己逼进

安切洛蒂彻底惹怒巴西球迷!罗马里奥公开喊话:赶紧收拾行李走人
安切洛蒂彻底惹怒巴西球迷!罗马里奥公开喊话:赶紧收拾行李走人

安切洛蒂是拿欧冠冠军次数最多的主教练,可谁能想到,他接手巴西国家队之后,把这份工作直接变成了一场噩梦。世界杯带队打得一塌糊涂,创下巴西自1966年以来最差成绩。他还一根筋,摔过跟头也不知道改,现在情况越来越糟,不光被日本队击败,自己还吃到红牌,被罚上看台。安切洛蒂最近被巴西传奇罗马里奥狠狠批评了一顿。罗马里奥说的,其实也是巴西球迷憋在心里的话:“安切洛蒂,我们受够了!收拾东西赶紧走吧!” 本来大家

盘点中国男篮历史六大控卫,郭艾伦赵继伟上榜,孙悦仅排第二
盘点中国男篮历史六大控卫,郭艾伦赵继伟上榜,孙悦仅排第二

中国男篮的历史上从来都不缺传奇中锋和神射手,好后卫确实少有的。94年的黄金一代开始两次进入世界前八,之后再2019年本土世界杯折戟,国家队每一个高光和低谷背后,球队内都会站着一名国内顶尖水平控卫。今天就来盘点中国男篮历史上的6大控卫。 第六名:赵继伟 赵继伟的职业生涯是伴随着质疑声长大的。1995年出生在辽宁的他,身高和速度都不够突出。进入辽宁一队时,队里已经有郭艾伦这个稳定的首发控卫,他只能从替

博格坎普将在酋长球场商店举办签名会
博格坎普将在酋长球场商店举办签名会

阿森纳传奇球星丹尼斯-博格坎普将于当地时间10月26日在酋长球场兵工厂商店举办签名会,并发布专属收藏纪念券。 此次活动将于10月26日(周六)下午3点至5点在酋长球场兵工厂商店举行。活动现场将发售售价25英镑的丹尼斯-博格坎普收藏纪念券,购买者可获得博格坎普的亲笔签名。每位球迷最多可购买3张纪念券获得签名。这款由The Global Note特别制作的收藏纪念券还具有增强现实特效,用户可通过其专属