研究人员将Whisper 集成到波士顿动力机器人 (https://twitter.com/svpino/status/1640323044731408384?s=46&t=J5tuuFL7Z3qsWetu4lBIXg)
Levatas实验室将Whisper和波士顿动力 Spot 机器人结合。用Whisper将语音转成文字,实现语言控制机器人的行动。
视频展示的能力还比较初级,但当机器人可以接入GPT-4用以控制自身和解决问题时,机器人将获得巨大的能力。(视频中没有说接入了GPT)
Google曾将 PaLM-E 集成到机器人 (https://ai.googleblog.com/2023/03/palm-e-embodied-multimodal-language.html) ,不过Google机器人远没有波士顿的手脚灵活,后者可做的将会多很多。
⚜️参考:https://say-can.github.io/