2025-09-06 16:47:36 5,859次浏览

“2025世界机器人大会”于8月8日至12日在北京经济技术开发区开幕,“AI 大模型赋能机器人与具身智能产业新范式交流活动”作为2025世界机器人大会的专题活动于8月8日同期召开。北京灵初智能科技有限公司联合创始人陈源培出席并演讲。以下为演讲实录: 今天给大家分享一些不一样的,跟大家聊一下灵巧操作这个领域的一些发展历程和未来合作的方向。 在我们看来,具身这个领域主要由四个方面组成,首先是本体。可以决定你做什么场景,场景决定了会采到什么数据,数据来训练算法。 很重要的一个点是你的算法是可以定义硬件的,所以我们更希望做的是循环过程,从算法出发可以定义需要怎么样的灵巧手,它的各项指标会是怎么样的。 对于算法而言,我们把它一般分成四个水平。第一个水平就是非标自动化,用CV之类的方法可以做一些比较固定的操作,但是泛化性比较有限,会有迁移到别的场景,会有一些问题。 第二个水平就是现在有一些端到端的算法,纯粹的喂数据,可以做一些比较灵巧具有一定泛化性的操作,但是没有解决的是长程任务其实很难,第二就是成功率的问题。本质上模仿学习就是生成数据分布,并不知道这个任务的具体目标是什么。所以我们灵初定位一开始做的L3,就是长程性和灵巧性,我们认为在这里比较重要的VLA技术和强化学习技术。 关于VLA分成了端到端的架构,已经成为了比较主流的共识,我们当时比较早的提出了分成端到端,大脑、小脑的架构。但是我们觉得有一个没有说透的点就是怎么做长程任务以及怎么把强化学习加进来,这两个是我们公司比较擅长的。 这就是很早的时候做的强化学习训练的任务,有很多朋友问我,这么多的Demo,其实很难分出来哪些是模仿学习做的,哪些是强化学习做的。但是觉得这是一个比较好的例子,它收集模仿学习数据都是比较难,所以能够做出来一定是用强化学习训出来的,这个也是我们当初的亮点。 它的整个系统是用两个灵巧手和双臂构成,我们在里面也用了一些多智能体强化学习和联合训练,在仿真里面泛化到各种物体姿态上面,整体的效果也是在各种不同形态物体,包括抛的位置不太一样,但是我们有一个比较快的速度接住,也是体现出强化学习对于高动态以及高灵巧度的任务优势。 在这之后我们做了双手灵巧手长程任务串连的任务,人手是非常灵巧的,比如说像叠饺子的任务,其实是有八个不同的技能组成的。我为什么要选灵巧手的原因是我们并不想让它只做一个任务,所以我们当时在想怎么用机器人做比较长程的任务,比如说像搭乐高,可能涉及到在一个乐高里面翻找、抓取、插入等等。后期人手的操作是比较多的,有灵巧手方面的工作,比如说抓取、弹钢琴等等。 这些工作大部分都是只包括使用一个任务,很多人觉得把两个任务串连起来是比较容易的,分别训练一个任务要串起来就可以了,但是我们有一个比较好的例子,比如说像这个任务从桌子上拿起一个锤子然后朝下。我们可以分别训练,但是其实最后串连起来的程度比较低,原来是我上一个任务抓取任务结束状态可能是蓝色圈比较大的,但是下一个任务是在里面比较小的圈作为初始状态才能成功。所以这个Gap会导致两个串连起来并不是一定就可以串连得非常好,所以我们提出了双向优化的框架。 简单来说,我们考虑了整个过程,我们后面的成功与否做前一个参考,在这个过程中参与强化学习思考怎么做下一个的时候更适合前一个任务。 除了这个之外我们就把这个框架运用到搭乐高的任务当中,里面有4个skill,分别是在乐高堆里面翻找,然后朝上、抓取、插入。所有的这些东西其实都是我们在仿真里面用强化学习进行训练的,用我们的这套方法串连起来。这有一些泛化性的展示,我们可以泛化到各种不同的形状物体上面。 把这个训完之后可以在里面翻找出来,然后转到插头朝上然后再抓取插入,能够做到比较好的效果,包括多个物体都可以比较好的插拔。 这个是我们新的系统,这是最后的整体效果,鲁棒性也比较好。比如说像这个自动在同一个真实的乐高堆里面翻,然后再转到插入朝说,然后再抓起来插入到下面。当你对它进行打断的时候,它也可以有一个非常快速的recover。所有的系统都是纯粹推动强化学习进行训练,然后迁移到真机当中的。大家如果需要看更多的视频可以去我们的网站上。 从单个物体比较灵巧的强化操作,到多个物体的串连长程任务。接下来就是上层大脑部分,就是我们的VLA怎么做。 VLA也是分层的架构,一开始会有上层的Planner和CONTROLLER,最后再根据任务做control。我们一个比较独特的点,我们的上下层之间是通过我们主要设计的actionToken进行连接的。具体来说上层可以通过自己的COT判断出最适合下层的是哪个任务,有一点像刚刚展示的搭乐高的效果一样,然后再选择合适的contro给到下层,这样的话就可以让长程任务的串连变得非常丝滑,然后成功率非常高。 这里面比较核心的技术就是在上层里面做训练,我们也是通过像DeepSeekR1之类的一些大模型做后训练,我们所有的东西都是可以在仿真里面做的。比如说像最近的打麻将的Demo,所有的东西都是在仿真里面做训练,验证完之后迁移到真机里面的,有一些真机数据但是用得比较少。 对于VLA的话,我们觉得没有一个比较好的从连接出来展示的共性,所以我们做了这么一个综述。VLA越来越火,大家也开始认识到如果要做比较泛化的长程任务,VLA是必不可少的。国际上也有一些比较先进的Demo,就像谷歌之类的。 所以我们联合北大灵初联合实验室就做了一个比较全的VLA的综述。因为在我们看来,做一个VLA的系统最重要的是是不是端到端的,如果不是端到端的话,上下层是通过什么东西连接的,这其实是极大的影响了VLA的性能。 我们也对VLA下了一个比较通用的定义,最少用了一个基座模型,并且有比较大的预训练的模型,我们就定义成VLA。 为什么要用VLA,从大模型的视角来看,从离身的智能到具身智能必须要有一个实体影响世界,所以从打大模型的视角看就是VLA是非常重要的。从机器人的视角,更多的是像我刚才说的做一个任务然后怎么做到多个任务并且多个任务串连起来,这个也是需要非常强的reason的能力,所以是从两个领域来看为什么VLA比较重要。 这个也是我们的一些发展图和分类,感兴趣的话大家可以看一下我们的综述还是非常全面的。 在我们视角看来VLA非常关键点就是上下层怎么连接的,我们大概分成很多种。像code有一些VLA,上层可能是输出一些code,然后下层调用code执行,有一些端到端的就把这个rowation。现在还有一些通过latent连接的,我们也下一个比较好的定义,也把市面上的所有的paper集中在一起,方便大家对这个领域有一个比较好的理解。这是对各种Token的可视化。这个也是现在的一些VLA的发展历程图,里面也会有一些take away,大家感兴趣的话也可以详细去看。 接下来说到未来灵巧操作的领域需要怎么发展,在我们看来模型最重要的数据,我们现在把数据分成了四层:互联网数据、仿真数据、真实数据、真机数据。右边也是我们现在的in the wild手套。 为什么我们定义真实数据很有效呢?因为我们判断大概率有真实GAP,真机数采出来的数据可能,对于某一些固定产品有效,但是因为不可能把世界上所有产品、所有物品、所有物体以及所有的操作都搬到数采厂来,所以他采出来的数据diverstiy一定是不够的,所以我们更prefer一种分包式的收集方法。 比如说一些家政阿姨可以带一些手套、摄像头平时不影响她的工作,把她一天的操作录下来,这个其实区别于互联网数据,因为互联网数据是比较杂乱的。比如说一个小狗到处跑步,包括有一些从洗衣机里面掏出某一些衣服,手是被挡住的,这个也是为什么我们说一定需要一个手套的原因。 第二点也是触觉非常重要,我们很早意识到触觉其实是非常重要的点。因为人手的骨骼和机械手的骨骼不一样,包括看上去也不一样,但是碰没碰到东西是一样的,所以很重要的一个点是我们可以通过触觉的信息来grounding embodiment gap,所以我们的手套上也是触觉信息传感器的。 在这之后我们有一套独特的强化学习方法,可以转换成高效的真机数据,并且可以介绍一下。 这个也是我们2024年做的研究,这个是当时最早的把人手的数据迁移到机械手上,并且能够非常work的工作。当时我们有一个非常重要的insight是纯强化学习是比较困难的,因为它可能很难探索,哪怕真的训出来了他的动作也不是很好。所以我们当时就想因为人手的数据是比较多的,并且人的数据其实是非常diverse的,所以我们就想怎么用人手的数据为机器人的训练做服务呢? 在这之前有一些别的研究,可能从一些互联网视频里面沉淀出来里面的动作,可能也用了人手的数据,也在real world上做了。但是由于我刚刚说的东西,这些数据的质量是非常低的,所以导致他们几乎不能做到除了pick and place以外其他的操作。 包括我刚刚介绍的比较长程的任务,虽然可以训练到一定的泛化性,但是想要真正的泛化到各种各样的场景下,其实是仍然缺Data的,这个也是为什么我们说纯RL还是不够,一 定要引入人手数据的原因。 所以我们当时就用了两个人手双手灵巧操作的数据集,我们就尝试把他的一些人看手机比如说打开柜子操作用到机器人上。我们核心的insight就是像我们刚刚说的,仿真机器人的数据是没有embodiment gap的,所以在我们看来比人手质量是更高的,但是由于一些各种各样的问题很难完全做到。人类的数据是可以采集比较多的,所以他的scaling的能力比较好,但是它因为和真实的机器人存在Gap,所以导致大家很多用不起来的原因。 所以我们一个非常关键的点是可以通过强化学习做优化来把人手的数据给到机械手上,所以这个是我们的框架。就比如说我们有一个high level的planner和lower的controller。high level的planner我们输入的是物体需要怎么运动,我们有一个generated model生成一个粗略的双手手腕的轨迹。 下层我们用强化学习训练出真实的灵巧手操作轨迹,这里面我们觉得这个框架非常优美的点就是建模了之前大家对RL一直忽略的问题,就是每一个任务都需要一个奖励函数,但是用这套方式所有的任务都可以变成一件事,就是给我一个物体需要怎么运动的轨迹,RL的任务就是操作这个物体,使得这个物体能够符合这个轨迹就可以了,所以我们所有的reward function就可以变成一个formulation就是物体的pose和你目标pose的差,所以这种情况下就可以训一些非常diverse的操作,就可以成功地把一些人手的数据迁移到机械手上。 inference就是先通过我上层的planner给我一个大模型或者输出一个物体需要怎么运动,比如说喝水就是水杯到嘴边。我们的generation molel先生成一个双手手腕的粗略轨迹,大部分是从人类的数据里面来的,里面精细地涉及到碰撞的操作是由强化学习负责训练的。 所有的这些都是在反推里面做训练的,这个也是我们的效果,在真机里面是加起来60多个自由度的双臂和双手吧,可以看到和人的操作是非常配合的,然后包括一些双手一起抬某个物体的动作,所有这些都是倍数。 这也是我们为什么做灵巧手的原因,很重要的一点是可以利用人类的数据。 硬件会做到极致的便宜,发现最终具身智能还是要ToC,在C端一定要起量的成本才能下去。至于要怎么起量,很大程度需要有一个非常强的预训练的模型能够非常快的适应到任何的场景中,这又回到了刚刚的闭环里,现在的仿制方比较难做到,所以必须要用人类的数据,因为人手和灵巧手是比较接近的,所以gap是最小的,这也是反推出为什么要做灵巧手,这是我们以终为始的理念。 关于场景,未来做ToC,目前因为限制,从一些ToB的物流、工厂先切入,慢慢的积累数据和模型,直到跨场景的泛化能力比较好的话,我们做一个新的场景就会比较快,慢慢的再往细分发展。 这是我今天的演讲,谢谢大家!

陈源培:具身智能最终还是要ToC
陈源培:具身智能最终还是要ToC

一年砸下10亿做广告的361度,“甩了”最快女护士

「活动」Xiaozihhqfdeyitian

0.65MB
版本V1.2.73
下载十八禁啪羞❌羞歪歪A🔞V㊙️视频安装你想要的应用 更方便 更快捷 发现更多
喜欢 00%好评(89475人)
评论 76
陈源培:具身智能最终还是要ToC截图0 陈源培:具身智能最终还是要ToC截图1 陈源培:具身智能最终还是要ToC截图2 陈源培:具身智能最终还是要ToC截图3 陈源培:具身智能最终还是要ToC截图4
详细信息
  • 软件大小: 50335.25662MB
  • 最后更新: 2025-09-06 16:47:36
  • 最新版本: V7.90688.3
  • 文件格式: apk
  • 应用分类:ios-Android ❌进入森林后被㊙️藤蔓侵犯
  • 使用语言: 中文
  • : 需要联网
  • 系统要求: 7.97921以上
应用介绍
一,短裙❌公🔞车被强好㊙️爽小说,❌強姦🔞着衣爆乳㊙️揉みま痴汉电车
二,公❌厕内小伙子打🔞飞∫,鸣人和❌小樱🔞的秘密约㊙️会
三,❌浪浪视频安卓版下载㊙️,国产❌又粗㊙️又猛又黄又爽的视频
四,蜜❌臀av🔞色㊙️欲av,1/❌n+2/n+3/🔞n+......㊙️n/n
五,日本❌无遮挡裸光屁🔞屁打屁股,12一1❌3X🔞XXHDHDHD
六,蜜❌桃懂色9㊙️1一区三区四区,碧蓝❌被抽🔞胸㊙️,按摩师他扒开❌我小泬🔞添我漫画
七,原❌神同人漫画在🔞线观看
【联系我们】
客服热线:134-2881-646
加载更多
版本更新
V6.1.73
孕❌妇丨91🔞丨九色
  • 最标准❌的🔞打㊙️屁股跪趴姿势

    日本❌无码浣肠🔞片

    小受被灌下❌药后遭人玩弄㊙️H

    92939.29MB
    105好评

    斗罗大陆2黄❌化漫画免费阅🔞读㊙️电影

  • 91在线无码❌精品秘白丝㊙️

    6❌080私人影院午夜理论手机㊙️被窝

    跪❌姿李慕㊙️婉

    47718.39MB
    346963好评

    无奈的❌情🔞欲电影在线观看㊙️

  • 护士被院❌长狂🔞躁㊙️到高潮

    武则天被扒开腿❌猛进免费㊙️视频

    ❌孞🔞嫑㊙️忈濭

    13.87MB
    319好评

    美❌杜莎泳装巨胸🔞A㊙️i照

  • ❌巨肉超污🔞巨黄H文

    宁❌红夜🔞光脚丫㊙️图片

    ❌ANAL.XXXX.H㊙️D

    53.90MB
    274好评

    ❌欧洲女同XXXX高潮㊙️不断

  • 丛林肉❌搏21㊙️星

    小舞穿三❌角形泳衣🔞女㊙️装

    ❌明日方🔞舟裸体自慰污图

    71.53MB
    705好评

    高铁出行无忧服❌务包怎🔞么㊙️取消

  • 温迪撅着屁❌股🔞让我c

    甘雨❌图🔞书馆㊙️

    ❌五条🔞悟被扒开腿狂躁

    83.83MB
    330好评

    ❌高桥しょう🔞子无码㊙️流出

  • 樱❌花🔞视频网站www入口㊙️

    ❌上村健一剑指U1🔞7小组出线㊙️

    无❌遮挡赤裸美女游戏㊙️

    23.76MB
    105好评

    舒淇三级全黄无❌删减版㊙️

  • ❌furr🔞兽人宝可梦

    男人动❌了情三个🔞征兆㊙️

    ❌老师扒开腿让㊙️我C

    50.13MB
    926好评

    博人传笕❌堇自慰🔞喷水漫画

  • 花火20❌15.6㊙️

    国产精品1❌2🔞34㊙️7

    直男被搓❌澡工🔞玩到高潮

    83.79MB
    567好评

    李宗瑞❌无码色情在🔞线㊙️观看

  • Delive❌ry集动漫在线观看平🔞台推㊙️荐

    www.海角社区.c❌om🔞.

    ❌女性🔞自慰全程无遮挡免费观看

    83.88MB
    756好评

    ❌美女视频在线㊙️观看永久

  • 比安卡❌18禁无遮挡无码视🔞频㊙️网站

    蜜桃视频在❌线入口🔞www㊙️

    ❌温迪被下🔞春药调教成肉奴

    87.17MB
    2204好评

    ❌中🔞原三玖h视㊙️频

  • 女❌人裸体ai去衣🔞软件免㊙️费下载

    白袜❌体育生爽🔞擼雞巴放烟㊙️花

    [Mini-Gia❌ntessGrow㊙️th]

    21.59MB
    854好评

    校花被下药玩弄❌到喷水动㊙️漫

  • 草草❌久性色88🔞AV综合AV视频

    隐囚高H❌肉无🔞删减版

    ❌真人一🔞对一免费视频

    65.57MB
    747好评

    成人无码H漫画❌app㊙️

  • 魅魔女王汉化版游戏❌玩法🔞攻㊙️略

    小❌s货又想挨c了🔞叫大声点小说

    国产9❌1打白嫩光屁㊙️屁网站

    54.78MB
    751好评

    ❌p站🔞黄

  • ❌国产男女爽爽🔞爽爽视㊙️频

    ❌aeo10جى㊙️نى

    男❌人的j进女人的p㊙️

    57.31MB
    688好评

    ❌海贼🔞王娜美㊙️的全身裸p图

  • 18美女高潮❌喷在撒尿㊙️

    51.❌cc网站🔞入口永久入口

    ❌山田凉白㊙️丝

    24.40MB
    353好评

    四❌虎牲无码www,1515-㊙️com

  • ❌茄子视频ap㊙️p

    ❌极端肠灌虐🔞肠bdsm视频㊙️

    杨❌幂被桶🔞爽到直流白㊙️浆

    13.53MB
    311好评

    小❌男生去体🔞罚室脱裤子打屁股视频

  • ❌刘🔞亦菲裸体性服务

    刘❌浩🔞存露了奶头照片

    ❌✿🔞顶级网黄✿在线播放

    84.52MB
    218好评

    ❌白丝小乔好紧⋯好大好爽动漫㊙️

  • 揉⋯啊⋯嗯~❌出水了🔞91

    男人使❌劲躁女人的大㊙️片

    鼬❌被🔞cao到高潮求饶失禁

    45.36MB
    734好评

    欧洲老妇❌做爰🔞XXXⅩ性活仓井空

  • ❌日本🔞少㊙️妇XXXXⅩ

    w❌w🔞w.91PRON.com

    ❌高清视频🔞成人网站

    10.24MB
    188好评

    ❌JO🔞JO玛莱雅胸罩是干㊙️什么的

  • ❌翔🔞霖自己坐上来do㊙️

    脱了她裙❌子🔞摸进她的内裤视频

    ❌去体罚室羞刑打开腿丫鬟视🔞频

    44.57MB
    361好评

    爱莉希雅被三❌个男人挠脚㊙️心

  • 片多多成❌人网址㊙️下载

    ❌美女隐私‰🔞脱㊙️无挡

    ❌羞羞视频原版🔞下㊙️载

    91.54MB
    205好评

    sm女❌仆自愿戴sm刑🔞具

  • 多人❌调教玩弄哭泣喷水n🔞p㊙️

    王语纯❌尤妮丝自🔞慰㊙️av

    一漫网漫画❌官🔞网㊙️

    30.36MB
    907好评

    ❌乱婬🔞h侵犯柳神

  • ❌女🔞主被坏人强迫㊙️侵犯的动漫

    别墅私❌奴调教1~🔞1㊙️7

    极❌品老🔞师㧒㊙️开粉嫩小泬视频

    30.63MB
    547好评

    ❌mg91.tv@gmail.c㊙️om

  • 服部平次被各❌种男🔞人㊙️啪H

    ❌AV寸止🔞榨精视频在线资源

    91麻豆精产国品❌一二三🔞在线播放

    29.91MB
    124好评

    DH-NV❌R410🔞4HS-HD

  • 久❌久AV无码乱码A片🔞sw㊙️ag

    Chinese GAY X❌XXX Videos and🔞VR㊙️

    欧❌美熟妇🔞高潮流白浆

    70.98MB
    458好评

    老头老人大爷❌同🔞性XxXx大全

  • Z〇〇❌XXa🔞Tb㊙️ooPANS小❌青模特V㊙️IP福利 title="❌中🔞文在线a∨在线" class="0v5366j9r7414 app-list-img" src="https://t11.baidu.com/it/u=1040017057,165456434&fm=30&app=106&f=JPEG?w=312&h=208&s=15B07D95426079116A1494FD03009032"">

    ❌龙卷全🔞身曝光㊙️

    给你❌免费播放的视频㊙️

  • 9I看片❌成人免费ApP㊙️▇芭❌乐🔞视频▇无码免费㊙️ title="❌美女张🔞开双腿久久久久久" class="0v5366j9r7414 app-list-img" src="https://t10.baidu.com/it/u=3070224572,165461829&fm=30&app=106&f=JPEG?w=312&h=208&s=C6000AAC4838BAC8463F54AC0300A00B"">

    ❌精🔞品午㊙️夜一区二区视频

    ❌捆绑玩弄体育生Ga㊙️y2022

  • 美女露❌1🔞00%无遮挡奶头色情污污黄王❌者男🔞英雄全肉H㊙️文 title="荒野乱❌斗黄🔞化入口㊙️" class="0v5366j9r7414 app-list-img" src="https://t12.baidu.com/it/u=1041590673,165100299&fm=30&app=106&f=JPEG?w=312&h=208&s=D7383EC642E1D8EA0A87937F0300C078"">

    OVA❌みだれうち#2(㊙️1-2)

    山❌村黃色亂伦小说㊙️

❌女10🔞0%㊙️裸体无遮挡调教超长视频 类似软件

猜你喜欢

相关攻略
包含 饿了么 的应用集
评论
  • 想要X❌X视频在线播㊙️放免费版 0天前
    布洛❌妮娅🔞的生理教学课
  • ❌黄偏网站在线🔞观看㊙️ 6天前
    裸❌体美🔞女免费视频
  • ❌老师上课露🔞出双乳给学生吃 4天前
    小黄书成人精品永❌久免费观看㊙️
  • 18禁❌成人游戏网🔞站 4天前
    ❌9🔞:1短视㊙️频
  • 9lPO❌RN🔞Y九色9l自拍视频 5天前
    女同桌用❌手揉🔞我的ji㊙️ji
  • 羞羞漫画❌入口入学生㊙️ 0天前
    爽⋯好❌大⋯快🔞⋯深点头短视频
  • 18禁❌无码裸体被&#6🔞5533;7&㊙️#65533;4网站免费 2天前
    ❌無料口エ漫画・同㊙️人志
  • 樱岛麻衣1❌8禁超㊙️污本子 8天前
    小医仙裙❌子真省布料㊙️
  • 大❌乳仙子婬荡呻🔞吟H㊙️视频 6天前
    乳夹 ❌口球 🔞捆绑 触手 无尽
  • 无码人妻❌丰🔞满熟妇啪啪网站牛牛 3天前
    ❌色🔞七㊙️影院