2025-09-06 23:59:46 0,032次浏览

“2025世界机器人大会”于8月8日至12日在北京经济技术开发区开幕,“AI 大模型赋能机器人与具身智能产业新范式交流活动”作为2025世界机器人大会的专题活动于8月8日同期召开。北京灵初智能科技有限公司联合创始人陈源培出席并演讲。以下为演讲实录: 今天给大家分享一些不一样的,跟大家聊一下灵巧操作这个领域的一些发展历程和未来合作的方向。 在我们看来,具身这个领域主要由四个方面组成,首先是本体。可以决定你做什么场景,场景决定了会采到什么数据,数据来训练算法。 很重要的一个点是你的算法是可以定义硬件的,所以我们更希望做的是循环过程,从算法出发可以定义需要怎么样的灵巧手,它的各项指标会是怎么样的。 对于算法而言,我们把它一般分成四个水平。第一个水平就是非标自动化,用CV之类的方法可以做一些比较固定的操作,但是泛化性比较有限,会有迁移到别的场景,会有一些问题。 第二个水平就是现在有一些端到端的算法,纯粹的喂数据,可以做一些比较灵巧具有一定泛化性的操作,但是没有解决的是长程任务其实很难,第二就是成功率的问题。本质上模仿学习就是生成数据分布,并不知道这个任务的具体目标是什么。所以我们灵初定位一开始做的L3,就是长程性和灵巧性,我们认为在这里比较重要的VLA技术和强化学习技术。 关于VLA分成了端到端的架构,已经成为了比较主流的共识,我们当时比较早的提出了分成端到端,大脑、小脑的架构。但是我们觉得有一个没有说透的点就是怎么做长程任务以及怎么把强化学习加进来,这两个是我们公司比较擅长的。 这就是很早的时候做的强化学习训练的任务,有很多朋友问我,这么多的Demo,其实很难分出来哪些是模仿学习做的,哪些是强化学习做的。但是觉得这是一个比较好的例子,它收集模仿学习数据都是比较难,所以能够做出来一定是用强化学习训出来的,这个也是我们当初的亮点。 它的整个系统是用两个灵巧手和双臂构成,我们在里面也用了一些多智能体强化学习和联合训练,在仿真里面泛化到各种物体姿态上面,整体的效果也是在各种不同形态物体,包括抛的位置不太一样,但是我们有一个比较快的速度接住,也是体现出强化学习对于高动态以及高灵巧度的任务优势。 在这之后我们做了双手灵巧手长程任务串连的任务,人手是非常灵巧的,比如说像叠饺子的任务,其实是有八个不同的技能组成的。我为什么要选灵巧手的原因是我们并不想让它只做一个任务,所以我们当时在想怎么用机器人做比较长程的任务,比如说像搭乐高,可能涉及到在一个乐高里面翻找、抓取、插入等等。后期人手的操作是比较多的,有灵巧手方面的工作,比如说抓取、弹钢琴等等。 这些工作大部分都是只包括使用一个任务,很多人觉得把两个任务串连起来是比较容易的,分别训练一个任务要串起来就可以了,但是我们有一个比较好的例子,比如说像这个任务从桌子上拿起一个锤子然后朝下。我们可以分别训练,但是其实最后串连起来的程度比较低,原来是我上一个任务抓取任务结束状态可能是蓝色圈比较大的,但是下一个任务是在里面比较小的圈作为初始状态才能成功。所以这个Gap会导致两个串连起来并不是一定就可以串连得非常好,所以我们提出了双向优化的框架。 简单来说,我们考虑了整个过程,我们后面的成功与否做前一个参考,在这个过程中参与强化学习思考怎么做下一个的时候更适合前一个任务。 除了这个之外我们就把这个框架运用到搭乐高的任务当中,里面有4个skill,分别是在乐高堆里面翻找,然后朝上、抓取、插入。所有的这些东西其实都是我们在仿真里面用强化学习进行训练的,用我们的这套方法串连起来。这有一些泛化性的展示,我们可以泛化到各种不同的形状物体上面。 把这个训完之后可以在里面翻找出来,然后转到插头朝上然后再抓取插入,能够做到比较好的效果,包括多个物体都可以比较好的插拔。 这个是我们新的系统,这是最后的整体效果,鲁棒性也比较好。比如说像这个自动在同一个真实的乐高堆里面翻,然后再转到插入朝说,然后再抓起来插入到下面。当你对它进行打断的时候,它也可以有一个非常快速的recover。所有的系统都是纯粹推动强化学习进行训练,然后迁移到真机当中的。大家如果需要看更多的视频可以去我们的网站上。 从单个物体比较灵巧的强化操作,到多个物体的串连长程任务。接下来就是上层大脑部分,就是我们的VLA怎么做。 VLA也是分层的架构,一开始会有上层的Planner和CONTROLLER,最后再根据任务做control。我们一个比较独特的点,我们的上下层之间是通过我们主要设计的actionToken进行连接的。具体来说上层可以通过自己的COT判断出最适合下层的是哪个任务,有一点像刚刚展示的搭乐高的效果一样,然后再选择合适的contro给到下层,这样的话就可以让长程任务的串连变得非常丝滑,然后成功率非常高。 这里面比较核心的技术就是在上层里面做训练,我们也是通过像DeepSeekR1之类的一些大模型做后训练,我们所有的东西都是可以在仿真里面做的。比如说像最近的打麻将的Demo,所有的东西都是在仿真里面做训练,验证完之后迁移到真机里面的,有一些真机数据但是用得比较少。 对于VLA的话,我们觉得没有一个比较好的从连接出来展示的共性,所以我们做了这么一个综述。VLA越来越火,大家也开始认识到如果要做比较泛化的长程任务,VLA是必不可少的。国际上也有一些比较先进的Demo,就像谷歌之类的。 所以我们联合北大灵初联合实验室就做了一个比较全的VLA的综述。因为在我们看来,做一个VLA的系统最重要的是是不是端到端的,如果不是端到端的话,上下层是通过什么东西连接的,这其实是极大的影响了VLA的性能。 我们也对VLA下了一个比较通用的定义,最少用了一个基座模型,并且有比较大的预训练的模型,我们就定义成VLA。 为什么要用VLA,从大模型的视角来看,从离身的智能到具身智能必须要有一个实体影响世界,所以从打大模型的视角看就是VLA是非常重要的。从机器人的视角,更多的是像我刚才说的做一个任务然后怎么做到多个任务并且多个任务串连起来,这个也是需要非常强的reason的能力,所以是从两个领域来看为什么VLA比较重要。 这个也是我们的一些发展图和分类,感兴趣的话大家可以看一下我们的综述还是非常全面的。 在我们视角看来VLA非常关键点就是上下层怎么连接的,我们大概分成很多种。像code有一些VLA,上层可能是输出一些code,然后下层调用code执行,有一些端到端的就把这个rowation。现在还有一些通过latent连接的,我们也下一个比较好的定义,也把市面上的所有的paper集中在一起,方便大家对这个领域有一个比较好的理解。这是对各种Token的可视化。这个也是现在的一些VLA的发展历程图,里面也会有一些take away,大家感兴趣的话也可以详细去看。 接下来说到未来灵巧操作的领域需要怎么发展,在我们看来模型最重要的数据,我们现在把数据分成了四层:互联网数据、仿真数据、真实数据、真机数据。右边也是我们现在的in the wild手套。 为什么我们定义真实数据很有效呢?因为我们判断大概率有真实GAP,真机数采出来的数据可能,对于某一些固定产品有效,但是因为不可能把世界上所有产品、所有物品、所有物体以及所有的操作都搬到数采厂来,所以他采出来的数据diverstiy一定是不够的,所以我们更prefer一种分包式的收集方法。 比如说一些家政阿姨可以带一些手套、摄像头平时不影响她的工作,把她一天的操作录下来,这个其实区别于互联网数据,因为互联网数据是比较杂乱的。比如说一个小狗到处跑步,包括有一些从洗衣机里面掏出某一些衣服,手是被挡住的,这个也是为什么我们说一定需要一个手套的原因。 第二点也是触觉非常重要,我们很早意识到触觉其实是非常重要的点。因为人手的骨骼和机械手的骨骼不一样,包括看上去也不一样,但是碰没碰到东西是一样的,所以很重要的一个点是我们可以通过触觉的信息来grounding embodiment gap,所以我们的手套上也是触觉信息传感器的。 在这之后我们有一套独特的强化学习方法,可以转换成高效的真机数据,并且可以介绍一下。 这个也是我们2024年做的研究,这个是当时最早的把人手的数据迁移到机械手上,并且能够非常work的工作。当时我们有一个非常重要的insight是纯强化学习是比较困难的,因为它可能很难探索,哪怕真的训出来了他的动作也不是很好。所以我们当时就想因为人手的数据是比较多的,并且人的数据其实是非常diverse的,所以我们就想怎么用人手的数据为机器人的训练做服务呢? 在这之前有一些别的研究,可能从一些互联网视频里面沉淀出来里面的动作,可能也用了人手的数据,也在real world上做了。但是由于我刚刚说的东西,这些数据的质量是非常低的,所以导致他们几乎不能做到除了pick and place以外其他的操作。 包括我刚刚介绍的比较长程的任务,虽然可以训练到一定的泛化性,但是想要真正的泛化到各种各样的场景下,其实是仍然缺Data的,这个也是为什么我们说纯RL还是不够,一 定要引入人手数据的原因。 所以我们当时就用了两个人手双手灵巧操作的数据集,我们就尝试把他的一些人看手机比如说打开柜子操作用到机器人上。我们核心的insight就是像我们刚刚说的,仿真机器人的数据是没有embodiment gap的,所以在我们看来比人手质量是更高的,但是由于一些各种各样的问题很难完全做到。人类的数据是可以采集比较多的,所以他的scaling的能力比较好,但是它因为和真实的机器人存在Gap,所以导致大家很多用不起来的原因。 所以我们一个非常关键的点是可以通过强化学习做优化来把人手的数据给到机械手上,所以这个是我们的框架。就比如说我们有一个high level的planner和lower的controller。high level的planner我们输入的是物体需要怎么运动,我们有一个generated model生成一个粗略的双手手腕的轨迹。 下层我们用强化学习训练出真实的灵巧手操作轨迹,这里面我们觉得这个框架非常优美的点就是建模了之前大家对RL一直忽略的问题,就是每一个任务都需要一个奖励函数,但是用这套方式所有的任务都可以变成一件事,就是给我一个物体需要怎么运动的轨迹,RL的任务就是操作这个物体,使得这个物体能够符合这个轨迹就可以了,所以我们所有的reward function就可以变成一个formulation就是物体的pose和你目标pose的差,所以这种情况下就可以训一些非常diverse的操作,就可以成功地把一些人手的数据迁移到机械手上。 inference就是先通过我上层的planner给我一个大模型或者输出一个物体需要怎么运动,比如说喝水就是水杯到嘴边。我们的generation molel先生成一个双手手腕的粗略轨迹,大部分是从人类的数据里面来的,里面精细地涉及到碰撞的操作是由强化学习负责训练的。 所有的这些都是在反推里面做训练的,这个也是我们的效果,在真机里面是加起来60多个自由度的双臂和双手吧,可以看到和人的操作是非常配合的,然后包括一些双手一起抬某个物体的动作,所有这些都是倍数。 这也是我们为什么做灵巧手的原因,很重要的一点是可以利用人类的数据。 硬件会做到极致的便宜,发现最终具身智能还是要ToC,在C端一定要起量的成本才能下去。至于要怎么起量,很大程度需要有一个非常强的预训练的模型能够非常快的适应到任何的场景中,这又回到了刚刚的闭环里,现在的仿制方比较难做到,所以必须要用人类的数据,因为人手和灵巧手是比较接近的,所以gap是最小的,这也是反推出为什么要做灵巧手,这是我们以终为始的理念。 关于场景,未来做ToC,目前因为限制,从一些ToB的物流、工厂先切入,慢慢的积累数据和模型,直到跨场景的泛化能力比较好的话,我们做一个新的场景就会比较快,慢慢的再往细分发展。 这是我今天的演讲,谢谢大家!

陈源培:具身智能最终还是要ToC
陈源培:具身智能最终还是要ToC

6亿件、超500亿元!生产车间里“嗒嗒”声奏响产业发展活力新节拍

「活动」Xiaozihhqfdeyitian

6.45MB
版本V7.1.81
下载▇无码精品❌国产🔞AV在㊙️安装你想要的应用 更方便 更快捷 发现更多
喜欢 94%好评(72519人)
评论 86
陈源培:具身智能最终还是要ToC截图0 陈源培:具身智能最终还是要ToC截图1 陈源培:具身智能最终还是要ToC截图2 陈源培:具身智能最终还是要ToC截图3 陈源培:具身智能最终还是要ToC截图4
详细信息
  • 软件大小: 60585.10304MB
  • 最后更新: 2025-09-06 23:59:46
  • 最新版本: V2.42702.9
  • 文件格式: apk
  • 应用分类:ios-Android 原❌神云堇全㊙️身抱枕
  • 使用语言: 中文
  • : 需要联网
  • 系统要求: 2.21649以上
应用介绍
一,❌51免费动漫观看入㊙️口,ai❌女友聊天🔞网页版㊙️入口
二,用力挺进白丝麻麻❌的小🔞泬㊙️,❌一本之“道αⅴ无码🔞专区
三,Chine❌s🔞eHDXXXX无套㊙️,福❌瑞娘vo㊙️re大肚子
四,.17❌c嫩嫩草色视频蜜🔞�%㊙️A,G❌TA5官方妓女裸㊙️体无删减
五,❌女仆🔞脱了个精光被主人摸作文,女同学掀❌开裙子让🔞我爽㊙️黄文
六,▌麻酥❌酥🔞▌西施玉足自慰,火❌影忍🔞者之yin荡的雏田,か❌た🔞かな
七,AI聊天电❌子魅🔞魔最新㊙️网页
【联系我们】
客服热线:134-2881-646
加载更多
版本更新
V7.9.09
7❌0hin🔞浓毛㊙️老妇HD
  • 女s❌调🔞教女m圣水屎尿调教网站

    ❌百合🔞H漫画性过程无删减无码㊙️

    美女❌被绑架从腿摸🔞到胸㊙️

    23396.21MB
    107好评

    欧❌美肌🔞肉裸男㊙️自慰ga

  • 欧美超清❌H🔞Dfree4k贵㊙️妇

    WWW.YJMW.❌GO🔞V.CN㊙️

    红影❌影院在线播放免费㊙️观看电视剧

    30908.54MB
    048206好评

    亚洲啪AV❌永久无码又大又黄宅㊙️男

  • 小医仙❌⋯啊⋯嗯🔞~出奶了动漫

    ❌女教师🔞裸体瑜伽视频展㊙️示

    伽罗太华❌被躁🔞还喷水㊙️

    13.39MB
    317好评

    宏G❌ay🔞被猛男Ca㊙️0精品

  • 91精❌品国产乱码🔞久久久㊙️久久久久

    日❌本赤裸㊙️裸羞羞影院视频

    傲慢少爷张开❌腿🔞挨C小说

    53.61MB
    274好评

    ❌美女被捆绑调教小说㊙️

  • www❌.miya🔞795.co㊙️m

    ❌哺乳期大乳头漫㊙️画

    王❌俪丁最惊艳的12🔞部短㊙️剧

    71.06MB
    704好评

    趁❌室友熟睡摸㊙️他裤裆经历知乎

  • 日本❌护士🔞裸体高潮

    黑桃BB❌C组织🔞q㊙️ueen

    帕❌拉梅干红㊙️葡萄酒

    83.78MB
    333好评

    高❌潮爽粗h抽搐㊙️

  • ❌火影小樱(同人)㊙️片子

    ❌主人sm调教惩罚趴跪㊙️

    制❌服美女の㊙️极放屁大便

    23.10MB
    109好评

    女❌S这样玩男🔞m才㊙️爽

  • 芭蕾舞白丝袜自慰AV❌无🔞码亚洲

    AI泰❌勒斯威🔞夫特在㊙️线

    ❌斗罗大陆18禁成人🔞游㊙️戏

    50.68MB
    920好评

    在线变态虐❌女残忍网㊙️站

  • 裸体❌和泉纱雾自慰喷水㊙️

    凯❌特琳和🔞蔚㊙️do

    欧美 变❌态 🔞另类 人妖

    83.89MB
    564好评

    同性男❌男Ga🔞y片在线观看播放

  • 学长❌上课把奶头露出来🔞给我玩动漫

    浪荡货老子❌大吗🔞爽㊙️死你

    欧❌美婬乱片A片AA㊙️A毛片地址

    83.48MB
    756好评

    原神丽❌莎🔞去掉衣服

  • ❌扒开🔞臀缝惩㊙️罚臀眼sp文

    ❌韩国做爰高潮A㊙️片激吻网站

    第五人格s❌s漫画🔞免费观看最新

    34.73MB
    5667好评

    ❌捆绑🔞男性挠㊙️痒VK

  • ❌亚洲孕妇A🔞片婬片www

    ❌91蜜桃麻豆最漂亮的女㊙️的

    ❌ex🔞ili霉霉

    97.14MB
    045好评

    旗袍少妇白丝❌娇喘好爽A㊙️V视频

  • 魅❌魔女🔞王汉化版游戏㊙️优势

    欧美成人爽快片婬乱❌视🔞频五十度灰

    ❌关晓🔞彤穿泳装比基尼照㊙️片

    65.99MB
    749好评

    ❌4🔞ido㊙️i视频

  • ❌小黄鸭在线观🔞看㊙️视频

    赵云被❌吕布按在🔞床上爆c

    强扒❌奶罩🔞摸双乳屈辱奶㊙️头伺候

    54.87MB
    754好评

    ❌9l视频白拍9色9l🔞视频

  • ❌xfplay55㊙️66色资源网站

    偷❌看女学生小便蹲🔞下视频大全

    女性向do❌i🔞片无删减

    57.88MB
    685好评

    ❌草莓榴莲绿巨人丝瓜茄子20🔞23

  • ❌梦露🔞裸㊙️奶照

    ❌韩漫无🔞删减

    原神❌万叶🔞同㊙️人H黄污小说

    24.16MB
    353好评

    娇妻黑鬼+绿❌帽+🔞受㊙️孕

  • 老师极品大乳美❌女爆乳裸久久㊙️

    浪荡货老❌子🔞大吗爽死你H

    她❌的🔞调教生㊙️活(调教 sm)

    13.52MB
    312好评

    触❌手怪钻进大🔞胸奶头软件㊙️

  • 国产明星做❌爰🔞A片毛片视频

    仓井空一❌级婬片㊙️A片AAA

    揉我奶❌⋯🔞啊㊙️⋯嗯高潮H

    84.67MB
    210好评

    gi❌antess18X🔞XXXHDvideos

  • 久❌久兔费黄🔞A级毛片高清

    女❌人🔞愿意给你睡㊙️的信号

    ❌巨大乳尖奶怀孕㊙️

    45.18MB
    733好评

    男❌人自慰出精黄AAA🔞AA片

  • (❌原神18㊙️)(黄网站)

    王者❌荣🔞耀㊙️女巨人妲己

    樱❌桃成人黄🔞站㊙️

    10.80MB
    189好评

    ❌瑶一瑶小🔞肉包停更原因

  • 刘耀文❌一🔞边顶撞一边哄女主㊙️

    羞❌羞的漫画SS㊙️S

    琴❌酒的🔞婬乱生㊙️活H

    44.98MB
    362好评

    ❌色欲Av午🔞夜一区二㊙️区三区视频

  • GAY❌成都男男㊙️网站

    男❌男自慰gu㊙️yguy伸个懒腰

    天使被❌触手用催乳🔞剂吸㊙️乳

    91.39MB
    201好评

    ❌咬住乳尖㊙️吸奶水

  • ❌giligili🔞蓝色官方正版㊙️

    ❌被女生坐🔞脸上放屁

    久久久久精品❌国产🔞四虎含㊙️羞草

    30.28MB
    902好评

    神印王座圣❌采🔞扒奶吸乳㊙️

  • 漂泊小❌南的侍奉漫🔞画免费观看漫画

    吴梦❌梦无🔞码AV视频

    性饥渴老妇XXXⅩOO❌OO月经㊙️

    30.37MB
    549好评

    女❌人🔞能㊙️承受被c多久

  • __❌___风车填二🔞个㊙️字

    爱❌丫爱丫影院电视剧在线播放㊙️

    ❌男🔞男动㊙️漫

    29.69MB
    123好评

    把❌老女人弄🔞高潮七㊙️次

  • 鸣人把玖辛奈澡到高潮下❌不了🔞床

    老师掀起裙子❌让我把🔞j放进去作文

    91国偷自❌产一🔞区二区三区㊙️观看

    70.64MB
    459好评

    ❌菠🔞萝蜜视频免费观看

  • 公交车❌上感🔞觉有一根㊙️巨大黑人狂躁❌刘玥XX🔞ⅩXX title="❌皮鞭同性打屁股男G㊙️ay" class="0v5366j9r7414 app-list-img" src="https://t11.baidu.com/it/u=1040017057,165456434&fm=30&app=106&f=JPEG?w=312&h=208&s=15B07D95426079116A1494FD03009032"">

    ❌大爆乳🔞美腿自慰喷水性色AV

    少❌年被调🔞教爽到失禁H

  • ❌涂山雅雅🔞婬肉版H文斯嘉丽❌脱内衣捏🔞奶头事件 title="井❌野🔞鸣人图片" class="0v5366j9r7414 app-list-img" src="https://t10.baidu.com/it/u=3070224572,165461829&fm=30&app=106&f=JPEG?w=312&h=208&s=C6000AAC4838BAC8463F54AC0300A00B"">

    ❌国产欧美国日产 视㊙️频

    Ff❌eeG🔞ayGV㐅XXXTV

  • 18被弄❌到抽搐冒🔞白浆高㊙️潮喷水❌小智脱了内裤打🔞开腿让人摸㊙️ title="温迪脸❌红自慰奶汁🔞飞溅" class="0v5366j9r7414 app-list-img" src="https://t12.baidu.com/it/u=1041590673,165100299&fm=30&app=106&f=JPEG?w=312&h=208&s=D7383EC642E1D8EA0A87937F0300C078"">

    李知❌恩换脸毛🔞片㊙️在线播放

    ❌A片5W9.CC㊙️

❌90岁做🔞爰A片老妇人 类似软件

猜你喜欢

相关攻略
包含 饿了么 的应用集
评论
  • 美❌女被桶🔞的好爽㊙️斗罗大陆游戏 3天前
    熟妇❌张🔞霞性囗交
  • 扶❌着他的根茎对准了坐进去视㊙️频 9天前
    ❌王🔞昭君c㊙️os
  • ❌羞🔞羞视频网页入口2024 0天前
    成人❌做爰A片AI㊙️换脸
  • ❌∏oph🔞a22khd 9天前
    ❌久久久精品爆🔞乳女同AV小㊙️说
  • 被闺蜜挠❌痒痒🔞折磨全过程 4天前
    抖音网❌红私🔞密视频
  • ❌QQs🔞s㊙️交流群 1天前
    68日本X❌XXXXⅩX🔞XX19
  • 翎❌颜靓🔞白素水光 9天前
    神奇❌宝贝🔞H本子
  • ❌久久久久久精品人妻一区蜜㊙️ 9天前
    AI换❌脸肖战男同网站㊙️
  • ❌原神91涩涩同🔞人网㊙️站 0天前
    原神嘉明❌脱🔞了内裤打开腿
  • ❌王🔞默脱了内衣㊙️让水王子看见 9天前
    成人漫❌画歪歪漫画㊙️