仿真延迟10ms,真实延迟500ms——我的具身智能多模态集成踩坑实录
大家好,我是许彦。干机器人这行五年了,ROS、具身智能,从机械臂到人形机器人,摸爬滚打下来,最深的体会就是:仿真很美好,真实世界很残酷。今天我想跟大家聊聊,两年前的GPT-4o模型,在我们的多模态具身智能项目里,到底经历了什么。 我们当时的目标很明确,要用GPT-4o的能力,让机器人能更自然地理解指…
大家好,我是许彦。干机器人这行五年了,ROS、具身智能,从机械臂到人形机器人,摸爬滚打下来,最深的体会就是:仿真很美好,真实世界很残酷。今天我想跟大家聊聊,两年前的GPT-4o模型,在我们的多模态具身智能项目里,到底经历了什么。 我们当时的目标很明确,要用GPT-4o的能力,让机器人能更自然地理解指…
大家好,我是许彦,一个在机器人领域摸爬滚打了五年的工程师。我的专长是ROS和具身智能,从机械臂到人形机器人,我见证了无数个仿真环境里完美无瑕的Demo,也体验了它们在真实世界里的“水土不服”。今天,我想和大家聊聊AI技术浪潮下,开发者如何转型,特别是AI工具对我们日常工作的影响。 AI工具普及与开发…
大家好,我是许彦。作为一个在机器人领域摸爬滚打了五年的工程师,我的工作从机械臂到人形机器人一路走来。今天,我想跟大家聊聊特斯拉发布的Optimus新款人形机器人,重点解析它的运动能力和感知系统提升。这不仅仅是一次产品迭代,更是对仿真和真实世界差距的一次深刻反思。 Optimus 新技术概述:仿真与现…
大家好,我是许彦。作为一个在机器人领域摸爬滚打了五年的工程师,我见证了从机械臂到人形机器人的技术迭代。尤其是在ROS和具身智能这条路上,我深刻体会到“仿真很美好,真实世界很残酷”这句话的分量。今天,我想和大家聊聊Figure 01与Tesla Optimus带来的具身智能新范式,以及我们在这条路上踩…
大家好,我是许彦,一个在机器人领域摸爬滚打了五年的工程师。ROS和具身智能是我的专长,从机械臂到人形机器人,我见证了无数仿真在虚拟世界中的完美表现,也经历了它们在真实世界中的水土不服。今天,我想和大家聊聊AI辅助诊断这个话题,一个听起来高大上,但落地过程中却充满了挑战的领域。特别是大模型的应用,它似…
大家好,我是许彦,一个在机器人领域摸爬滚打了五年的工程师。这五年里,我见证了从机械臂到人形机器人,仿真软件变得越来越逼真,但一放到真实世界里,总会遇到各种意想不到的坑。今天,我想跟大家聊聊一个更前沿的话题——新一代 AI 芯片的竞争,特别是高带宽内存(HBM)与能效比的技术突破。这不仅仅是理论,而是…
做机器人这5年,我对“仿真很美好,真实世界很残酷”这句话有切身体会。半年前,我们把一个大语言模型部署到机器人上做实时任务规划——仿真里指令生成延迟稳定在180ms,抓取动作行云流水;搬到真机第一天,xArm 6机械臂就在我面前硬生生把一个玻璃量杯拍到地上。原因不是什么算法缺陷,只是推理响应偶尔从20…