会士面对面 | 清华大学邓志东教授;“自动驾驶3.0与人形机器人:关于具身端到端纯视觉智能体发展的若干思考”

日期:2024-07-22 14:44

CAA会士面对面系列活动是中国自动化学会为学会会士量身打造的高端学术交流平台,每期活动邀请1位或数位学会会士进行专题报告,围绕国际科技热点,聚焦国家创新发展战略需求,前瞻学科领域发展新方向,积极发挥学术引领和科技智库作用,展现重大学术咨询研究成果,引导社会尊崇科学思想和方法,促进公众提升科学意识和素养。

2024年第5期,总第27期“会士面对面”讲座于7月19日上午成功召开,中国自动化学会会士、清华大学邓志东教授作题为 “自动驾驶3.0与人形机器人:关于具身端到端纯视觉智能体发展的若干思考”的报告。

清华大学邓志东教授作报告

邓老师在报告中介绍了从自动驾驶1.0到自动驾驶3.0的演化过程、特点以及通用人工智能的迭代演化路径。详细阐述了为什么一体化的端到端视觉-语言-动作大模型如此重要?分析了动作空间与感知空间之间的关系以及联合预训练等。邓老师还强调利用多模态自动驾驶大模型,结合外部搜索工具及驾驶技能的知识图谱表达等,通过RAG、知识增强与提示词工程,提升其复杂的逻辑推理能力。邓老师还探讨了自动驾驶3.0与人形机器人的实现路径,强调基于深度强化学习、世界模拟器或虚实平行世界,实现从形似到神似,对齐甚至超过人类智能行为与动作技能的可能性,并指出应通过学习去解决自动驾驶的一切问题。最后邓老师还对高阶NOA与L3/L4自动驾驶规模化产业落地进行了分析。

清华大学邓志东教授作报告

北京交通大学张慧讲师担任主持人

本次活动由北京交通大学张慧讲师主持,通过腾讯会议、CAA会议小程序、CAA官方视频号、学会微博官方账号、B站、科界、蔻享、抖音等平台全程直播,共计5万余人次在线观看直播。