群发资讯网

不只告诉你如何做,AI开始“用手势教你”

别人告诉你“把抽屉放到窗边”,你听懂了;可真站到机器前,还是会卡住。东西在哪?先碰哪里?手该怎么动?

很多时候,我们缺的不是一句更长的说明,而是有人在关键处指一下、比一下。

[一R] 语言一进真实空间,就容易讲不清
做过硬件、进过实验室,或者第一次用陌生设备的人,大概都懂这种感觉。说明书写得没问题,别人讲得也没问题,但你还得在脑子里把一句话重新翻译成空间、方向和动作。

AgentHands 想补上的,就是这一步。它把语音里的“这里”“往那边”“先打开这个”,变成出现在真实空间里的指向、拿取、移动和提醒。

[二R] 重点不在“给 AI 加一双手”
我觉得这篇研究比较有意思的地方,是它没有把手势当成一个炫技动画。手势要出现在一句话的正确位置。

说到“这里”,才指向这里;说到“把它移过去”,动作才跟上;遇到需要注意的地方,才停下来提醒。错半秒,或者指错一个位置,体验就会变得很奇怪。

所以它真正想解决的是当人准备动手时,AI 能不能少让他做一步空间判断。

[三R] 研究结果没有夸张,反而更让我信服
研究者找了 12 位用户,安排两类真实任务。
对照组听到的是同样的语音,只是没有手势。带手势时,用户对空间关系和下一步动作更有把握,完成过程也更顺一些。

但它还不能替你教会所有机器。
每台设备都有自己的按钮、风险和操作顺序;真实场景里,目标识别、动作时机、设备状态,都还需要继续做细。

这篇研究让我重新想了一下,AI 进入真实世界后,到底该帮人做什么。也许不是把所有事情都接过去,而是在你听懂、却还没真正会做的时候,补上那个最容易卡住的小环节。

你有没有过这种时刻:明明听懂了说明,走到设备前还是不知道下一步手到底该放在哪里?

#人机交互 #智能硬件 #PhysicalAI #空间计算 #AI造物社区 #谷歌 #交互设计 #XR #机器人
#夏日电子梦