“做了一辈子机器人,深知其困难” | 一场关于机器人的深度对话
2023年12月19日,深圳市美团机器人研究院学术年会在清华大学深圳国际研究生院成功举办。会议回顾了研究院成立一年来的进展和成果,并邀请了各界专家共同讨论机器人技术的未来发展趋势。
在圆桌论坛环节,极客公园创始人兼总裁张鹏担任主持,他与北航机器人研究所名誉所长、中关村智友研究院院长王田苗,加拿大工程院院士、南方科技大学讲席教授张宏,中国工程院外籍院士、德国国家工程院院士张建伟,清华大学电子工程系教授、系主任汪玉,清华大学交叉信息研究院助理教授、清华大学具身智能实验室负责人许华哲5位行业专家学者,围绕机器人的技术发展、应用场景、产业前景3个方向展开了深度的讨论。
王田苗
| 同学们在学完基本的方法和理论知识后,面临一个更重要的课题:你是否真正想要改变世界。如果怀揣这样的愿望,自驱力、冒险精神、与人交流的智慧都会随之增强,这些品质对个人成长具有不可估量的价值。
张宏
| 研究人员的任务是「顶天」,做产业的任务是「立地」,这就是「顶天立地」。科研工作,更多的是追求突破、创新,而做产业则是追求稳定、可靠,能够产生商业价值。如果让产学研同时成功的话,我们就需要进行科研合作,让产业界有效地能利用高校产出的这些研究结果去落地到他们的产品当中。
张建伟
| 在应用层面,协作机器人和物流配送机器人都有非常大的推进,使我们在机器人系统的应用、迭代方面,取得了非常大的进展,进一步给机器人系统应用、数据收集提供了非常好的机会。在机器人的元器件发展方面,国内进展也非常快。比如美团投资的3D点云相机已经越做越小,相信未来可在无人机上应用。还有激光雷达、电机减速器等,这一年进步都非常大。
| 人工智能提供了一种可能性,使机器人平台底层算法中绝大多数的计算方式变得更统一,或者说「更矩阵」。过去用到矩阵求逆这种复杂的操作,但现在可能都是矩阵乘向量、矩阵乘矩阵。在感知大模型、决策大模型中都是如此;在控制过程中,也可以使用强化学习等模型。
| 「具身智能」更多是「智能体」基于它对世界的理解,将自身的技能进行泛化,形态只是它的一个载体。
以下为圆桌对话的内容整理:
今天也是希望借助这样一个机会,跟多位业界专家一起探讨下机器人领域未来的发展趋势,以及未来在科研合作层面,学术界和产业界各自面临着哪些挑战。首先,我想先请各位帮我们圈点一下,在刚刚过去的这一年里,机器人领域有哪些让各位印象深刻的、值得圈点的事件?
王田苗:我个人觉得有三件比较重要的事件,让「具身智能」走到了这个时代的窗口。第一件事情还是特斯拉的人形机器人,因为马斯克让我们看到了,未来有可能两万美元的设备就可以走进工厂替代现有的工人。虽然这个机器人仍然存在着很多质疑,但是我们很期待看到它的进展。
第二个我认为是脑机接口,我们知道如果在操作层面能够实现,可将大模型植入到人类的大脑之中,这将是一个巨大的突破,最新Nature也公布了最新的人机交互成果,现在基本上可以将脑意识和四肢的功能区定位结合起来,让人能够说话,对那些长期瘫痪或者中风的病人来说,已经是一件非常好的事情了。而且在实现层面,软体手的落地进展也非常快,这点很重要,因为如果没有操作的话,机器人进入工业或者家庭,仅仅只能实现对话的功能,其意义并不是很大。
张宏:过去这一年,我认为最重要的事件之一就是我们美团机器人研究院的成立。在这里,非常感谢美团给我这个机会,我们一起完成了高校与实验室的深度合作,我个人也非常鼓励企业多进行这种合作。
请允许我先介绍一下自己的从业经历,我20岁的时候就出国了,2020年回国,在国外从事机器人研究三十多年,可以说机器人这件事我做了一辈子。我之所以回国,非常重要的一个原因就是,国内有很多像美团这样高科技公司,他们愿意跟学术界展开科研合作,而且更为重要的是,深圳是一个充满活力的城市,这里有很多世界级的高科技企业,而且企业跟学术界的科研合作氛围也非常好。很高兴看到美团搭建了机器人研究院这样一个平台,我相信在座的很多同学也是这种合作机会的获益者。
提到机器人发展,刚才王教授讲得非常好,我这里稍微补充一下。过去一年,大家都知道ChatGPT已经发展的如火如荼,实际上它对机器人的发展也是一个很好的推动作用,包括我、还有我自己的学生都开始了这方面的研究工作。我刚刚讲过,机器人这个事情我做了一辈子,我深知这是一件很难的事情,甚至从一定意义上讲,四十年前的机器人和前几年的机器人并不存在质的区别,说明这件事情很难。
张建伟:今天非常开心,能够跟几位三十多年的朋友相聚在这里,而且聊机器人这个话题也非常有意义。今年我跟张宏老师一样,也参加了几个世界级的机器人领域的重要大会,我们对机器人领域的发展,包括学术层面已经取得的成绩是有着普遍的了解的。另外,我目前也在负责审批一些相关的会议,每年我能够看到一百多个Conference的主题,包括他们对未来的发展趋势的判断,我这里都能够看到。
总的来说,在应用层面,写作机器人和物流配送机器人都有着非常大的推进,这使得我们在机器人系统的应用、迭代方面,取得了非常大的进展,而这些进展又给我们的机器人系统应用、数据收集提供了非常好的机会。另外,在机器人的元器件发展方面,国内现在进展也非常快,我所知道的,比如美团投资的3D点云相机现在已经做得越来越小,我相信未来在无人机上的应用也能够很快得到实现。还有我们现在的激光雷达、电机减速器等等,这一年进步都非常大。
除了上面这些高速增长的领域之外,我觉得人工智能已经开始为各行各业进行赋能,不仅仅只是机器人这一个领域。我理解的机器人赋能,实际上是通过人工智能的四个方面快速进行发展,包括算法、数据、算力以及机器人学会如何学习,通过大量的仿真,我们能快速地加快机器人在真实世界的调试。在这方面,「具身智能」今年给我们带来了几个方向的新突破,特别是在视觉领域的突破,还有对环境的语义的理解等等多个层面,我相信未来也会给我们带来了更多的惊喜。我相信张宏老师跟美团的合作项目,将会是一个非常好的范例。
在机器人的Sequence Planning方面,我们通过机器人大量的序列收集和机器人序列的具身模型,我们已经能够得到更多的解决方案,未来我们对机器人的使用方式和人交互方式会有一个革命性的改变。
另外,ChatGPT对我们机器人领域的研发者起到了非常快的加速作用。相信很多使用过的同学都知道,ChatGPT已经能够具备了Low Level Coding Skill,能够快速将我们的idea、知识很快变成一个真实的产品。从一定意义上讲,人工智能这种指数式的增长,为机器人发展提供了非常强大的动力,这也使得「具身智能」成为未来发展的一个主体。
许华哲:在我看来,「具身智能」其实最简单的定义就是一个有身体的智能,它是一个很大的概念,可能所有非具身的东西都在具身智能的范畴内。
汪玉:这个问题挺难回答的,各位都是机器人行业的前辈,我从2018年才开始关注机器人领域。我此前主要研究的方向是芯片,芯片的突破跟底层的工艺以及上层应用都存在着很强的关系。大家都知道,在底层工艺上,我们国家现在发展也受到了供应链层面的一些影响。但上层的应用,我觉得未来的重点会是机器人,所以从2018年开始,我下定决心开始看机器人相关的领域,目前还没有正式研究「具身智能」,现阶段只是聚焦于无人车、自动驾驶这些领域。
张建伟:我想「具身智能」的应用可能会发生在我们生活中的方方面面,包括我们现在的物流,未来的养老和工厂。这个问题就是对机器人的几个垂直领域在近一两年内谁可以实现批量突破的一个预测。
我认为物流现在是一个非常快的增长点,这个方向也包括工厂的运输,我们目前应该处在2B到2C中间的过渡阶段。未来物流应该还会在现有的基础上进一步深化,将机器人部署到更多的实际场景中,然后在物流领域做出更加精密的模型,在更多的业务场景中真正实现自动化。比如我们现在的物流行业,还是需要有人帮忙打包,然后贴上物流单,以及最后的配送过程,都还需要人力来实现。未来我们将逐步通过科研合作,让机器人参与到更多的物流流程之中,我们通过大量收集数据,包括紧急场景的处理数据,在垂直模型中就能够精确地、自动化地预测出来下一步应该做什么动作,我想未来应该很快就可以看到这方面的应用。
张宏:我想先补充一下对「具身智能」的知识,「具身智能」这个概念实际上是由做人工智能的人提出来的。「具身智能」简单来说就是要「落地」,机器人不能只生活在电脑里。
我从事机器人研究做了很多年,有比较深的体会,最早的时候,我们开各种国际会议、学术会议,机器人行业有自己的大会,人工智能行业也有自己的大会,其实对老百姓来讲的话,两个会应该在一起开。可是在那个年代,机器人行业的终极目标可能只是人工智能的起点,我们关心如何把一个瓶子可靠地抓起来,而做人工智能研究的同学想的是,假设我已经可以抓起这个瓶子了,还可以做什么事情,当时是非常不健康的。
经过大家多年的努力,实际上已经让这两者距离慢慢在缩短,特别是「具身智能」这个概念提出以后,进一步推动了这两个领域健康共同发展。大家都知道,技术的发展一般有两个不同维度的发展,一个是走商业模式,实现商业上的成功,一个是科技发展。这两件事情的评估标准是不一样的,要求是不一样的,当然挑战也是不一样的。
我们做学术研究的总是希望做一些创新的东西出来,但是如何在商业层面取得成功,实际上我们是不太懂的,是外行。而且很多机会其实是我们预想不到的,甚至是偶然的。回想一下这些年我观察到的一些非常成功的商业案例,比如很多年前我们做扫地机器人,当初产品刚出来的时候,我们在美国卖这个扫地机器人,没想到市场反应还是比较好的。但是我们早期看待这个产品的时候,就觉得它是一个玩具,因为它扫地其实并不是很干净。不过,我们对比了现在能够看到的商业机器人,我们发现扫地机器人是最成功的例子之一。
王田苗:前面几位专家说的都特别有道理,我主要在思考「具身智能」是怎么从人工智能和机器人延伸出来的。其实「具身智能」很早的概念,在50年代就被提到了,只是后来,人工智能走「人工智能」的路线,机器人走「机器人」的路线,然后走到了今天,当我们打通了底层的算力,大家觉得「具身智能」这件事情已经变成可行了。
而大模型出现以后,「具身智能」可以比喻为一个孩子,只是它的成长速度超乎想象。通过人机交互,我们可以帮助它将宏观的任务分解为一系列思维链路和子任务,并利用自动编程,局部自主来完成任务。在这个过程中,「具身智能」将逐渐学习和成长,变得越来越聪明,这是第一方面的概念;第二个方面,「具身智能」在复杂环境下可以利用感知、视觉和触觉等功能来校准行为动作或控制模型的误差,以适应环境变化。基于这两个方面,现在又延伸出了垂直大模型和文本大模型。
如果这个定义是正确的,那么「具身智能」第一条发展主线就是服务性的。我这里举一个例子,比如在一个人为创造的环境下,现在的机械手臂,可以拿起物品并完成装箱。如果换一个环境,机器人是够能够理解我们的意图,继续复制之前的操作。
我认为服务型「具身智能」应该会率先进入到社会,特别是公共服务领域,比如我们刚刚提到的物流、陪伴、聊天服务等等,它需要具备感知大模型。还有一种我们可以称之为劳动型「具身智能」机器人,这种类型机器人最大的特点就是需要劳动,需要具备一定的操作技能,可能就不需要具备情感能力了。
在工业层面,目前小批量多品种已经变成了一个趋势,比如打磨、更换一个器件等等,这个成本可能需要几千元,这需要工程师进入机器中进行标定,然后再完成编程等工作。如果「具身智能」发展到一定的阶段,它就可以通过不同的方式或者工艺,用更短的时间就可以完成换件工作,包括打磨、抛光、剔除毛刺等等。因为工业目前比较依赖工程师,所以落地速度应该会晚于服务型机器人。
最近,还有一个应用场景是科学发现,包括材料的科学发现、药品的科学发现,我们都知道医药的配方非常复杂,人类研发一种新药,可能需要十几年的时间才能应用于临床。如果利用「大模型」工具,当设定好实验模型,我们就可以让机器去拿这个瓶子各种捣鼓,实现昼夜24小时工作,还可以连续工作7天,这样我们就可以用极短的时间,完成一个博士生10年的工作量。
许华哲:就像我刚刚说的,「双足」本身只是形态之一,且「双足」一定会有。但是,我们可以想象「具身智能」不是想要创造一种机器人,而是创作一个大的物种,这个物种里面包括人、狗、飞机、车等等,它们都是「具身智能」大类别中的一个形态。
我个人比较期待的第一个研究方向是「生成式仿真」,在我看来,「具身智能」之所以跟传统的机器人不一样,是因为它的泛化能力,这个泛化是通过学习算法在仿真系统中去习得的,然后可以用在各种各样的地方。相信做过机器人的都知道,「仿真」需要大量的人力、物力,而且跟现实并不是很像。而对「生成式仿真」系统来说,能够自动长出一个「仿真」,就像这个屋子一样,「具身智能」可以直接在这个屋子里利用「强化学习」算法去学习,去模仿,自然就可以学到很多有用的技能。
第二个比较感兴趣的方向,我觉得是在线学习的能力。当机器人已经完成了部署,比如说像我们的无人机每天都在飞,那我们采集到更多新的数据,能不能一直让它迭代变强。因为早期的「具身智能」不一定好用,它怎么能够用到未来的数据让自己能持续变强,是用强化学习,还是用Transform?就像大模型一样,如何让它变得强,这也是我比较感兴趣的点。
汪玉:这也是一个比较大的问题,我先谈一谈个人的看法。刚刚讲到我是偏硬件方向,应该处于机器人和人工智能的边界,既要看机器人的论文也要看人工智能的发展,当然如果想让机器飞起来,还要看一下底层的平台。
刚刚各位专家谈的都是能力,是感知、决策、控制一体的能力,其实平台也需要具备这样的能力。而人工智能提供了一种可能性,使机器人平台底层算法中绝大多数的计算方式变得更统一,或者说「更矩阵」。过去用到矩阵求逆这种复杂的操作,但现在可能都是矩阵乘向量、矩阵乘矩阵。在感知大模型、决策大模型中都是如此;在控制过程中,也可以使用强化学习等模型。
在这个过程中我们发现,控制算法还是需要做,去把边界定义清楚的理论还要继续研究,感觉、控制需要一体化,我们需要把人工智能和传统硬件集成到一起,做成一个平台。为什么要做这个事情?刚才我们也提到机器人统一的操作系统,但不管是什么操作系统,底层也得是硬件,而这类硬件传感器有无数种,所以我们还是需要有一个类似大脑的东西,来统一控制这些传感器。那这个「大脑」最终的形态是什么?如果这个没有统一,我觉得成本是降不下去的。
我们再从量的层面来看,这里应该谈到产业界,我们在其中看到上千万的扫地机器人和自动驾驶汽车,当然还有很多规模没有突破千万的机器人。这些机器人有点像昆虫纲,每个品类都非常优秀,但是规模都比较有限。但是,有可能背后的平台未来会是统一的。所以,从我们角度来看,学术界希望能把这样的平台慢慢推广下去,让每个垂类能够用更低成本地去做迭代,才有希望真正能够成功。
张建伟:这是一个Million Dollars Question,这里可以补充一下,不仅仅是我们国家,包括欧盟等国家也在思考着如何把产学研有机融在一起。我们曾经做了很多种计划,都是围绕怎么填补技术和产业界之间存在的鸿沟。其实,通过ChatGPT取代现有白领们的工作,这不是我们想要的。我们面临真正的问题是,现在父母年龄大了没有人照顾,富士康工厂组装iPhone的工人已经招不到了,负责打扫卫生、收拾家务的保姆也没有人做了,所以我们这两年应该如何从技术层面进行突破,不断解决劳动力短缺的问题,才是目前最为重要的事情。
近期,我们看到了国内相关的一些报道,一方面,是我们软硬件成本整体的下降;另一方面,我们发现了一些新的需求。这里举两个例子,一个例子是利用大模型、智能视觉来识别除草,明年欧盟就要禁止使用除草剂了,对从事农业机器人的公司来说,未来的农业除草只能靠物理方法来实现,这里就需要思考如何把草的类型做成大模型,然后来利用视觉进行高速、准确的识别,不管是人工处理还是激光铲除,都是一个非常大的产业,如果科研机构跟企业能够组合在一起,就是一个很好的突破。
张鹏:感谢各位专家学者的精彩分享,这里总结一下,机器人技术如果想在商业层面持续地走下去,核心还是需要看一些具体的应用场景,同时也需要更多的科研人员和企业加入进来。就像美团正在低空经济领域做的很多工作以及创新成果,我们也很欣慰地看到有这么多的高校和人才都在为建设该领域「增砖添瓦」。
之前,机器人领域属于一个专精的领域,绝大多数人都不敢碰,而现在我们观察到,即便不是机器人领域的人才,他们也可以把交互设计做得很好,能将外观设计的很好。当越来越多的人参与其中,机器人产业就跟市场走得越来越近了。这也是时代赋予我们这代人的机遇,也是因为有这么多优秀的新鲜血液进来,有更多好的应用场景,机器人行业才会如此蓬勃发展。
王田苗:我个人觉得应该「因材施教」,每个人来到这个世界都有TA自己的使命,有些人没有找到,只是环境还没有唤醒TA。如果你想成为一个科学家,就应该将自己的研究成果写到书本上;如果你的使命是想做一款与众不同的产品,那你可能更适合做工程,将自己的产品放到货架上去售卖。这是在「产学研」这个方面,我自己的一些思考。
我觉得美团这方面做得很好,这里先从产业方面来说,其实美团今天也创造了两个场景,一个场景是,你真的有本事,就来美团举办的大赛,让大家看看你的工程动手能力、想象力;另一个场景,大家是可以通过参与美团的科研项目,如果你有重大的原理性突破,比如在某些算法领域实现了效率的提升,也可以更好地成就自己。
对于大学生来说,我认为同学们在学完基本的方法和理论知识后,面临一个更重要的课题:你是否真正认识或找到自己追求或是想要改变世界。如果怀揣这样的愿望,自驱力、冒险精神、与人交流的智慧都会随之增强,这些品质对个人成长具有不可估量的价值。
我们今天刚好是在美团机器人研究院的年会上,几位老师在各自领域都是比较资深的科研带头人,如果说科研是站在人类已知和未知的边界上不断地向前突破,那像美团这样优秀企业就是将我们已知的知识变成产品,然后去创造更幸福的生活方式来服务更多的人。从这个意义上讲,大家本质上都是在一个更宏大的目标下各有分工,我们属于同一个更大的团队,我觉得这也是产学研一起往前推进的最重要使命。我们也特别期待美团机器人研究院未来能不断取得新的突破和进展,在更多技术领域成为产学研一体化的「标杆」。