首页 > Ai资讯 > Ai日报 > Snap 发布第五代 Spectacles AR 眼镜 内置AI 可通过语音提示直接生成 3D 动画

Snap 发布第五代 Spectacles AR 眼镜 内置AI 可通过语音提示直接生成 3D 动画

发布时间:2024年09月19日

Snap公司发布了第五代SpectaclesAR 眼镜,新版Spectacles具备更高质量的显示效果和更长的电池续航时间。然而,与前几代一样,这款产品尚未商业销售,而是面向开发者开放使用。开发者需通过 Snap 的 Lens Studio 申请,并支付 99 美元/月的租赁费用,至少租赁一年。

是的,Snap 要求开发者在一年内支付 1188 美元才能使用这些 Spectacles。即便如此,Snap CEO Evan Spiegel 仍相信开发者的兴趣不会减弱。

Snap 表示,这一版本的视场角为 46 度(相比上代的 26.3 度),其波导显示器每度显示 37 个像素——Snap 认为这是衡量 AR 显示质量的正确方式,比以前提升了大约 25%。眼镜的物理镜片在阳光直射下会自动变暗,让你在户外也能清楚地看到投射在周围环境上的内容。

光学引擎提供了 46 度的对角视场角,并具有每度 37 像素的分辨率——相当于在 10 英尺外看到 100 英寸的显示屏。Spectacles 还会根据环境光自动调节色调,因此无论是在室内还是室外,即使在阳光直射下,视觉效果依然明亮。

Snap 基于 OpenAI 的打造了自己的聊天机器人 My AI,用户可以通过手势和语音控制设备,体验多种增强现实应用,还可以利用 AI 根据语音提示生成 3D 动画等。

Snap Spectacles第五代的升级情况:

  1. 增强现实显示:新版Spectacles配备更丰富、沉浸感更强的显示效果,分辨率和颜色表现都有显著提升,带来了更清晰的视觉体验。
  2. 视野范围扩展:视野从上一代的26.3度提升至46度,使得用户在使用增强现实功能时能够看到更广阔的场景。
  3. 自适应镜片:镜片可以根据外部光线自动调节,确保在强光环境下也能清晰地看到AR内容。
  4. 手势和语音控制:通过手部动作(如捏合、拉伸等)和语音指令,用户可以与设备进行交互,控制界面和应用程序。
  5. 更长的电池续航:电池续航时间从上一代的30分钟增加到45分钟,并支持通过USB-C接口进行充电,可以在充电时持续使用。
  6. AI集成应用:Spectacles内置AI功能,支持基于语音指令生成3D动画的增强现实镜头,以及Snap自家的AI聊天机器人”My AI”。
  7. AR应用开发支持:Snap推出了针对开发者的Lens Studio工具,开发者可以通过租用Spectacles开发并测试自己的增强现实应用。
  8. 硬件技术提升:设备配备了两颗定制的高通Snapdragon处理器,能够有效分散热量,并采用液晶硅基投影仪来增强图像显示效果。

Snap Spectacles 2024 详细功能与特点

1. 硬件功能与设计
  • 轻量化设计:Spectacles 重量仅为 226 克,几乎是传统虚拟现实头戴设备的一半,佩戴舒适,适合长时间使用。
  • 多摄像头和传感器集成:眼镜配备四个摄像头和多个传感器,能够进行精确的环境理解、手势跟踪和6DoF(六自由度)追踪。6DoF 允许用户自由移动,并与增强现实内容互动,提供更自然和沉浸的体验。
  • 先进的光学引擎:采用 Snap 自家设计的液晶硅基(LCoS)微型投影仪,结合波导技术,生成清晰、明亮的 AR 图像。无需进行复杂的校准,用户即可轻松体验增强现实内容。
  • 自动调光镜片:镜片能够根据外部光线环境自动调节亮度,确保在室内和室外的视觉效果都能保持清晰,尤其在强光下也能轻松看到投射的增强现实内容。
2. 显示与视觉体验
  • 46度视野:Spectacles 的显示器具备 46 度的对角视野(FoV),能够让用户在更广阔的视野内看到增强现实内容,与上一代产品相比提升显著。
  • 37像素每度的分辨率:提供高达 37 PPD(像素密度)的波导显示,能够为用户带来类似于观看 100 英寸显示器的视觉体验(距离 10 英尺)。
  • 自动调节:镜片的自动调节功能根据光线环境调整镜片的亮度,使显示内容在各种环境下依然清晰明亮。
3. 计算能力与性能
  • 双系统芯片架构:采用高通的双 Snapdragon 处理器,能够分担计算工作负载,确保设备的流畅运行。这种架构还能有效降低功耗,同时提升处理复杂增强现实任务时的效率。
  • 蒸气室散热:为了应对长时间使用中的发热问题,Spectacles 采用了钛蒸汽腔散热设计,确保设备能够长时间佩戴并处理高强度的 AR 内容,而不会过热或导致性能下降。
  • 电池续航:Spectacles 具备高达 45 分钟的连续使用时间,并支持 USB-C 充电,用户在插入充电时仍可继续使用。
4. Snap OS 操作系统与互动
  • Snap OS:Spectacles 运行在全新的 Snap OS 操作系统上,该系统专为自然交互而设计,提供直观的用户界面和交互方式。用户可以通过手势和语音命令来控制眼镜,而主菜单始终可通过手掌的手势来调用。
  • Snap 空间引擎:Snap 的空间引擎能够精确理解周围环境,并以极低的 13 毫秒运动至图像延迟(motion-to-photon latency)将增强现实内容无缝整合到现实世界中。它确保 AR 内容在三维空间中展现得更加自然与逼真。
5. 增强现实体验与应用
  • 多模态 AI:Spectacles 内置的多模态生成 AI 支持基于环境和用户交互的实时生成内容。用户可以通过 AI 浏览网页结果、生成 3D 资产,并在日常活动中观看空间排列的视频内容。
  • 共享镜头体验:Spectacles 强调多人共享体验。通过 Snap OS,开发者可以创建适合家庭或朋友一起使用的增强现实应用。例如,通过 Spectacles,可以与朋友一起加入共享镜头,在增强现实环境中进行互动和游戏。
6. 扩展功能与配套应用
  • Spectator Mode(观众模式):Spectacles 的 Spectator Mode 允许用户与朋友分享自己的增强现实体验,朋友们可以通过他们的设备以自己的视角观看用户的体验过程。
  • 手机镜像功能:Spectacles 支持手机镜像功能,用户可以将手机上的应用程序或内容直接显示在眼镜中。这一功能极大地扩展了眼镜的应用场景,用户可以更加方便地使用常用的手机应用程序。
  • 6DoF 控制器:通过 Spectacles 的配套应用,用户可以将手机变成一个 6DoF 控制器,进一步提升 AR 应用的互动性和操作自由度。

Snap 积极鼓励开发者为 Spectacles 开发新的应用和增强现实镜头。Lens Studio 5.0 工具包优化了开发流程,支持 TypeScript 和 JavaScript,允许开发者更加轻松地构建和发布 AR 应用程序。开发者可以通过简化的开发工具快速将项目部署到 Spectacles 上。

开发者可以直接在 Spectacles 的镜头中使用自定义机器学习模型,轻松实现对象识别、追踪和增强功能。此外,Snap 还与 OpenAI 合作,计划将云端托管的多模态 AI 模型引入 Spectacles,帮助开发者提供更智能的应用体验。

如果你想要了解关于智能工具类的内容,可以查看 智汇宝库,这是一个提供智能工具的网站。
在这你可以找到各种智能工具的相关信息,了解智能工具的用法以及最新动态。