微比恩 > 信息聚合 > 用苹果 Vision Pro 实时训练机器狗,MIT 博士生开源项目火了

用苹果 Vision Pro 实时训练机器狗,MIT 博士生开源项目火了

2024-03-11 14:39:29来源: IT之家

Vision Pro 又现火爆新玩法,这回还和具身智能联动了~就像这样,MIT 小哥利用 Vision Pro 的手部追踪功能,成功实现了对机器狗的实时控制。不仅开门这样的动作能精准 get:也几乎没什么延时。Demo 一出,不仅网友们大赞鹅妹子嘤,各路具身智能研究人员也嗨了。比如这位准清华叉院博士生:还有人大胆预测:这就是我们与下一代机器互动的方式。项目如何实现,作者小哥朴英孝(Younghyo Park)已经在 GitHub 上开源。相关 App 可以直接在 Vision Pro 的 App Store 上下载。用 Vision Pro 训练机器狗具体来看看作者小哥开发的 App——Tracking Steamer。顾名思义,这个应用程序旨在利用 Vision Pro 追踪人类动作,并将这些动作数据实时传输到同一 WiFi 下的其他机器人设备上。动作追踪的部分,主要依靠苹果的 ARKit 库来实现。其中头部追踪调用的是 qu

关注公众号
标签: on 苹果 开源