加州大学圣地亚哥分校和麻省理工学院的研究人员刚刚推出了一个名为Open-TeleVision的项目,这是一种开源的沉浸式主动视觉反馈的远程操作系统,允许用户可以从数千英里之外控制机器人,类似于电影《阿凡达》那样的场景。
该系统支持多种设备(如Vision Pro、Quest、mac、iPad、iPhone)访问,使用户能够精确地操作复杂物体。
关键点
Open-𝐓𝐞𝐥𝐞𝐕𝐢𝐬𝐢𝐨𝐧是一个用于远程操作机器人的界面,能够收集更多机器人数据。
该系统支持用户在距离3000英里外沉浸式地操作机器人,类似于电影《阿凡达》中的场景。
实时立体视频流提供空间和深度理解,使操作者对物体位置有准确的把握。
系统支持精细操作,可以处理复杂的物体,如透明盒子。
通过主动颈部、逆运动学(IK)和重定向技术,使操作者可以直观地感知和操作,机器人会跟随操作者的头部运动。
系统可以从任何带有网络浏览器的设备上访问,如Vision Pro、Quest、mac、iPad、iPhone等。
提供了开源代码、视频、硬件和数据集,用户可以随时试用,甚至不需要VR设备。
Support authors and subscribe to content
This is premium stuff. Subscribe to read the entire article.
Hacker News是一个提供专业技术分享的社区,包括文章、图像视频等。页面极其简单,没有广告。