一般来说,我们不太能看到像 Nvidia 和苹果这样的巨头之间的合作。但最近他们在 Nvidia GTC 2024 大会上宣布了一个合作项目,让人挺惊讶的。他们要一起开发 Vision Pro,就是让苹果的 Vision Pro 和 Nvidia 的 Omniverse 云平台一起用,让用户直接通过 Vision Pro 与物体和设计进行交互。
具体说,他们会用到 Omniverse 云 API,这个东西可以把 Omniverse 的内容传到苹果的Vision Pro 里。值得注意的是,Omniverse 本身并不在 Vision Pro 上运行。相反,设计师可以用 Omniverse 中的一种叫 OpenUSD 的工具制作场景,然后传到 Vision Pro 里,然后就可以和 3D 物体玩儿了。
在展示视频里,日产展示了一些功能,比如在 Vision Pro 里改车的颜色、装饰,甚至可以感知进入车内。这肯定会让企业界感兴趣,也会给普通用户带来些影响。
Nvidia 主要是想展示他们可以把这些可玩的 3D 应用传到 Vision Pro 上。这是通过他们的图形传输网络(GDN)实现的,之前已经用于把 3D 应用从云端传输到设备上。这对 Vision Pro 的发展非常关键。
关键在于 Omniverse Cloud API。在大会上,Nvidia 还发布了五个新的 API,都是围绕 Omniverse 的 OpenUSD 这个工具的。这些 API 可以单独用,也可以一起用,包括渲染、写入、查询、通知和通道,帮助用户更好地处理和修改 3D 数据,实现交互式场景和USD变化的追踪。
现在,Vision Pro 主要在企业界用,这也符合苹果 Vision Pro 的定位。但这也为未来把可玩的 3D 应用传到苹果头显上奠定了基础。尽管 Vision Pro 功能已经很强大,但还有些方面需要改进,比如处理高精度的 3D 场景。如果能把这些场景也以同样的质量传输过去,未来就会有更多有趣的应用。