新闻中心 > 基层声音  > 正文

灵巧智能IROS首发开源DexCanvas数据集,破解灵巧操作物理对齐难题,构建灵巧操作数据基座

2025-10-25 19:46:43   来源:映象网

5034

  行走让机器人抵达位置,而精准操作才是其创造价值的核心。在具身智能从虚拟认知迈向物理交互的关键阶段,一个核心难题浮现:如何让机器人的操作策略与真实物理定律精准对齐?

  当前,基于海量互联网数据训练的机器人“大脑”已能高效规划任务,但负责精细力控与接触交互的“小脑”却因高质量物理数据匮乏而发展受限。这一瓶颈在需要高自由度精细操作的场景中尤为突出——正如行业调侃:“教灵巧手抓鸡蛋,它学会了20个关节轨迹,却不知5个手指该用多大力。”问题的本质,在于灵巧操作数据在规模、真实性与力觉信息 间存在的“不可能三角”。

  在IROS 2025 会议上,灵巧智能(DexRobot) 系统性展示了其突破性技术体系,核心是在大会首日发布开源的DexCanvas数据集 。这一数据基础设施的诞生,标志着行业从“硬件竞赛”转向“数据驱动系统构建”的关键转折,为解决具身智能的“物理对齐”难题提供了系统性方案。

  一、数据困境:物理智能的“三重矛盾”

  灵巧操作数据采集面临三大核心挑战:

  1.遥操作 :虽能获取真实力控信息,但效率低、成本高,难以规模化;

  2.视频学习 :数据规模大,但缺乏深度与力觉维度,仅能捕捉“表面动作”;

  3.仿真合成 :可快速生成海量数据,但仿真与现实的物理鸿沟始终难以弥合,导致模型“有姿势无实质”。

  更深层的问题在于,现有数据集普遍存在“轨迹完整而物理信息缺失” 的缺陷。机器人可复现人类手指运动轨迹,却无法感知接触点的微妙力变化,导致在拧瓶盖、插拔接口等任务中表现不佳。业内专家指出:“当前灵巧手研究的瓶颈不在于算法,而在于训练数据缺乏物理完备性。我们需要的不仅是动作的‘影像’,更是力觉的‘灵魂’。”

  二、DexCanvas的破局之道:从“数据采集”到“物理补全”

  DexCanvas数据集通过三大创新步骤,系统性解决了数据质量与规模的矛盾:

  1.精准采集与结构化设计:覆盖全场景操作空间

  基于Cutkosky抓取分类学,研究团队系统设计了22类操作模式,覆盖从精密捏取(如针线操作)到力量抓握(如提拉重物)的完整空间。通过高精度动捕系统,实现亚毫米级轨迹记录精度,同步采集RGB、深度、动作轨迹等多模态数据,为物理反演提供丰富输入。

  2. 物理反演与力觉补全:让数据“活”过来

  这是DexCanvas的核心创新。团队将真实人类演示轨迹置入物理仿真环境,通过强化学习智能体复现轨迹。只有当接触点施加正确的力时,仿真物体运动才能与真实演示一致 ,从而自动推导出缺失的力觉与接触信息。这一过程实现了从“动作影像”到“物理灵魂”的补全,使数据具备真正的物理意义。

  3. 物理一致的数据增强:1000小时→10万小时

  在保持物理真实性的前提下,通过调整物体质量、摩擦系数等参数,将1000小时真实演示扩展为10万小时增强数据。这种增强基于物理规律外推,而非简单复制,显著提升了数据的泛化能力,使模型能适应更多未知场景。

  三、技术验证:让机器人“真正理解物理”

  基于DexCanvas数据集训练的算法在多种灵巧操作任务中表现优秀:

  抓取易碎品:模型能根据物体材质(如玻璃、陶瓷)动态调整力度,避免破碎;

  操作精密仪器:在插拔接口、旋转旋钮等任务中,模型能精准控制接触力,确保操作成功;

  自适应环境:面对不同摩擦系数、重量的物体,模型能快速调整策略,实现稳定操作。

  算法不仅模仿动作,更理解了操作背后的物理原理,真正实现了“如何用力”的智能决策。

  四、开源与行业影响:从“封闭开发”到“开放协作”

  为推动领域协同发展,灵巧智能于10月21日在Hugging Face 等平台开源DexCanvas数据集 。这一举措将带来三方面变革:

  1.建立量化基准 :基于Cutkosky分类体系的22类操作模式与统一精度标准,解决了数据规范不统一的问题,为领域提供可对比的“标尺”;

  2.降低研究门槛 :配套提供标准接口、数据加载器与完整处理代码,使团队可专注于算法创新,而非重复造轮子;

  3.促进跨平台迁移 :人源数据与硬件无关的特性,打破了数据与特定平台的强绑定,为技能迁移提供了可能,加速技术落地。

  这一开放策略正在重塑行业生态,从孤立开发转向基于共享基础设施的协同创新。随着更多团队在DexCanvas基准上迭代优化,灵巧操作技术将进入加速发展阶段,为机器人、制造业、医疗等领域构建可持续发展的技术底座。

  DexCanvas,连接数字与物理世界的桥梁

  灵巧智能在IROS 2025的展示,清晰勾勒出一条以高质量数据为驱动、物理一致性为核心、真实硬件为验证的技术路径。DexCanvas的推出,不仅是一个数据集,更是一套系统性解决具身智能“物理对齐”难题的工程与学术基础设施。

  在具身智能迈向通用化的进程中,谁能率先构建起数字智能与物理世界的桥梁,谁就将掌握未来话语权。灵巧智能正通过DexCanvas,努力成为这座桥梁的关键奠基者,推动机器人从“机械执行者”迈向“智能创造者”。

文章关键词:数据,&ldquo,&rdquo 责编:兰明群
5034

相关阅读 换一换

  • 百万粉丝网红小英回应离婚进展:已和丈夫签署财产分割协议

    10月24日晚,百万粉丝网红小英发视频回应与丈夫“上拉如”离婚进展,称没有自己想象中那么快就有结果。 此外,小英还回应丈夫上拉如开奔驰。她表示,自己给了上拉如一笔钱,两人签了一份财产分割协议,“至于他拿这个钱去买什么车,我已经管不了了,我

  • 与虚拟“恋人”约会,有人已花了十几万……

    与心爱的二次元角色看电影、拍写真、共进晚餐……最近,一种名为“COS委托”的新型情感消费正在年轻人中悄然兴起。单主们付费聘请Coser(角色扮演者)扮演虚拟世界的恋人, 共赴一场现实的约会。那么,这种花钱营造的浓情惬意真的浪漫吗? 约虚拟“

  • 卢浮宫的防盗系统为啥这么“脆皮”?

    光天化日之下,仅仅7分钟,8件珍宝被盗,窃贼则全身而退? 这并非电影桥段,而是10月19日发生在法国卢浮宫的盗窃案。 消息传出,举世震惊。无数人感慨,作为世界上最著名的博物馆之一,卢浮宫的防盗系统竟然是“脆皮”的! 10月19日,在法国巴

  • 多穿点防感冒?这些误区要注意→

    近期 全国南北方受冷空气影响 北方多地寒意提前上线 南方秋意也已拉满 多地经历换季式降温 你是否经常听到这样的说法 “多穿点,小心冻感冒!” 感冒真是“冻”出来的吗? 10月20日,安徽阜阳市民在寒冷天气中出行。 一降温就感冒! 是不是“

  • 老花眼普遍提前了?如何让它来得晚一些?医生支招

    老花眼不是一种眼病,是随着年龄增长,眼内晶状体逐渐硬化、弹性减弱,导致眼睛调节功能下降的正常生理现象。就像我们的头发会变白,皮肤会出现皱纹一样,眼睛的“调焦系统”也会随着年龄增长而老化。 01 与年龄有关! 我们的眼睛里有一个叫做“晶状体”

  • “双十一”为什么越来越早了?

    新华网

  • 水均益辟谣

    10月24日,前央视主持人水均益在直播时,额头放“中国人”纸条,否认移民传闻:“请大家千万不要再传谣了,我们全家是中国人。” 9月8日,水均益在家乡兰州开启直播首秀,并辟谣移民海外。水均益称:“没移民,没定居,现家住北京,老家兰州,全家都

  • 中国游客马来西亚失联最新进展

    近日,两名中国游客在马来西亚著名潜水胜地美人鱼岛度假期间失踪一事,引发关注。 据扬子晚报报道,在马来西亚当地官方停止搜索后,失联女生的好友缪女士告诉记者,家属已于近日看到两人失踪前的监控画面。“家属在失联男生酒店的包里找到了他的耳机。”但

  • 豫见青岛|山海之城的流量密码

    大象新闻记者 段伊博 一处网红街角、一棵“孤独的树”、一艘“日落橘子海”游船、一杯泡沫升腾的啤酒……从欣赏山海美景的拍照打卡,到漫步老城的Citywalk,青岛这座城市自带“网红流量”。 鱼山路和大学路交汇的拐角,一处看似不起眼的街

  • 300元以下买不到真羽绒服?挑选时看好这三大指标

    价格不是评判羽绒服质量的唯一标准。 近日,“300元以下基本买不到真羽绒服”的话题冲上热搜,引发热议。店主信誓旦旦,这个价位买的都是“飞丝”而非真羽绒,让不少追求性价比的消费者心里一凉。 价格,真的能成为判断羽绒服真伪的“金标准”吗?低价

慢新闻

辟谣:新疆塔什库尔干县发生4.0级地震,这些谣言勿信! 辟谣:新疆塔什库尔干县发生4.0级地震,这些谣言勿信!

新闻推荐

网站简介 | 版权声明 | 广告服务 | 联系方式 | 网站地图

Copyright © 2012 hnr.cn Corporation,All Rights Reserved

映象网络 版权所有