庞建新:大模型技术在人形机器人智能化中的应用

科技 2024-04-03 16:04 阅读:31

庞建新最近一直在思考一个核心问题:“大模型怎么融进人形机器人里?”作为优必选副总裁、研究院副院长,他领导团队将大模型技术应用于人形机器人的多模态感知和决策规划中,提升人形机器人智能化水平。他的专业背景横跨语音处理、计算机视觉,再到人形机器人技术,是中国智能科技崛起的缩影。

庞建新认为,大模型技术的核心在于融合大量知识和数据,为人形机器人领域带来了巨大的机遇,但同时也带来了新的挑战。他提出了如何将大语言模型技术与人形机器人的“小脑”和“本体”结合的问题,以及如何处理大语言模型可能产生的“幻觉”等挑战。

在实际操作层面,庞建新表示,优必选采取双管齐下的策略,既要分层结构的解决方案,又不能放弃端到端的解决方案。他详细解释了将大模型分为处理知识、常识推理的“大脑”层,指导动作规划的“小脑”层,以及直接与控制相结合的动作执行层的分层解耦方法。

此外,庞建新还分享了优必选与新能源车厂合作的实训项目,展示了多模态感知决策技术的应用。他坚信大模型技术将是推动未来技术进步和产业化的关键。

在与雷峰网-AI科技评论的对话中,庞建新深入探讨了大模型技术对人形机器人智能化进程的影响,以及国内企业如何把握技术快速发展的机遇。他指出,当前人工智能和人形机器人技术的结合正处于一个开放性问题的时期,需要在小规模场景中进行实验和测试。

庞建新的研究背景和加入优必选的经历使他对AI+机器人领域有着深刻的理解。他强调了技术和产品同步发展的重要性,以及在研究成果转化为实际产品时的心得。他还展望了未来几年可能出现的颠覆性技术变革,包括仿真技术在人形机器人领域的潜在影响。

在当前市场对机器人需求集���在工业制造、教育等领域的背景下,庞建新认为大模型技术的应用将为人形机器人带来新的机遇。他指出,未来几年可能会出现多项颠覆性的技术变革,包括仿真技术、大模型技术等,将为人形机器人领域带来新的发展机遇和挑战。

庞建新的见解和观点为人形机器人智能化进程提供了新的思路和方向,展示了大模型技术在机器人领域的巨大潜力。随着技术的不断发展和应用,人形机器人将迎来更加智能化和多样化的发展。