【新华社】跨越千里 杭州科技企业“隔空”指挥机器狗探火山
新华社客户端浙江频道9月20日电(记者张璇)身处杭州的工程师通过一部手机,成功操控了位于内蒙古乌兰察布市乌兰哈达火山的一只机器狗。起立、右转、越障……随着操作人员发出指令,千里之外的机器狗在火山碎石坡上几乎实时响应。
“想要实时操控千里之外的机器狗,首先必须解决延时问题。”19日,在AI大模型赋能大视频产业高质量发展研讨会上,当虹科技副总裁吴奕刚表示,企业研发的BlackEye Vision机器人采用超远距离远程控制系统,把端到端的延时控制在80毫秒以内,所以操控起来和现场近距离操控一样丝滑。
这一技术的难点在哪?吴奕刚表示,跨越千里的远程操控对机器人的感知能力和信息传输能力都提出了巨大挑战,并且火山附近属于弱网环境。该技术的特点是依托于BlackEye多模态空间大模型的压缩能力,先将高清视频流进行10—100倍的压缩,再通过AI画质增强算法,确保在低带宽环境下也有高清视野,把现场复杂的环境信息传回给操控人员。
“这意味着,机器人超远距离远程操控系统在地震、特殊作业等断网环境中也能发挥重要作用。”吴奕刚表示,通过远程操控的方式使机器人在复杂的环境中执行任务,其实是一边完成真实任务,一边积累高价值操作数据,为后续的模仿学习与离线强化学习提供“燃料”。
值得一提的是,BlackEye Vision还具备多模态处理能力——视频、音频、雷达点云、控制信令、文本信息都能同步传输。这意味着,操控人员不仅能看到高清影像,还能通过三维空间数据感知地形起伏、障碍物距离,获得接近真实的临场感。尤其是遇到烟尘、雾气等可见光视频识别困难时,雷达点云数据就可以派上大用场。
现场业内人士表示,远程操控是机器人走向具身智能的必由之路。未来,机器人很可能呈现“具身智能+远程操控”的融合形态。而在具身智能真正到来的时候,远程操控也将在具身机器人“失灵”的时候起到“接管”的兜底作用。