封面
本期封面,我们分享的是来自 Max 制作的 Spline 场景 Lighting Bulb。
刊首语
本周最为重磅的消息应该就是 Orion 原型机的面世了,尽管比起来 Apple Vision Pro 价格更贵,并且大家上手的时间更长更没有预期(是的,现在对于 Orion 什么时候能够正式面向消费者,Meta 并没有给出明确的预期),Orion 的发布还是在行业内外引起了不小的轰动,从微信指数的数据看来,这一次 Orion 的发布得到了比二月份 Apple Vision Pro 发售更大的关注。
也许很多文章、视频都会说,未来已来 blabla,但我个人还是觉得,现阶段 Orion 的发布最大的意义,是给人们以希望,让人们看到:AR 眼镜并不是一个不可能的产品,现有的技术还是可以完成一个在硬件指标上勉强够用的产品,最起码,离我们期待的大家都能用上 AR 眼镜的那一天应该不会超过十年(🤣),就像本期封面的灯泡一样,我们现在已经看到了一些微弱但稳定的光芒。
目录
News
Meta Connect 大会
Meta 发布了 Meta Spatial SDK
Apple 提供了新的 visionOS Sample Code
Tools
PICO Emulator(Beta)
App
Story: Spatial Storytelling
Code
SGMExamples:Shader Graph Material Examples in visionOS
RealityMixerVisionPro:Mixed Reality Capture app for the Vision Pro
News
Meta Connect 大会
美国当地时间 9 月 25 日,Meta Connect 大会正式开幕,在这次大会上,Meta 不出意外的发布了大家提前都已经非常熟悉的 Meta Quest 3s。
关于 Meta Quest 3s 可以说的并不多,你可以理解为是 Quest 3 的一个廉价版本,CPU、镜头都没有太大的变化(甚至镜头略有下降,回到了 Quest 2 的分辨率水平),128GB 价格 $299,256 GB $399,折合人民币 2000 左右,发售当日就可以预购,十月 15 日开售。购买者可以获得一个蝙蝠侠·阿卡姆的游戏。
顺便一提,Quest 3s 这个名称确实很有迷惑性,叫它 Quest 3 lite 或许会更好一点。
此次 Meta 对 Quest 3s 的描述,以及操作系统 Horizon OS 的描述,都在将其描述为一个混合现实的产品。
而此次发布会更大的两点则是 Orion——一款据称 Meta 研发了 10 年的产品,这是一款目前还不向消费者发售的 AR 眼镜,它采用了碳化硅镜片,拥有 70° 的,镁制作框架,自研芯片,支持眼动追踪和手势识别,续航大概两个小时,重量仅有 90g,同时带有一个随身的计算单元 Wireless Compute Puck(这个计算单元上看着还有一个摄像头,但目前还不知道这个摄像头具体是用来做什么的),一个可以感知肌电信号的腕带,这样可以在 Orion 检测不到手的时候。
目前这个腕带可以识别到的手势除了拇指和食指的捏合,还可以感知一个滑动的手势,这个手势看起来用在上下滑的场景下是非常完美的:
从发布会的信息来看,一个 Orion AR 眼镜的成本大概在 1 万美元(2022 年的量产数据),因为物料成本太高,因此 Meta 也是不得已搁置了这个产品的正式发售计划,并且只制造了 1000 副,用于公司内部展示和合作伙伴试用。
个人觉得,现阶段 Orion 出现的最大意义,是让大家认识到:现有的硬件技术,其实是可以实现一款轻量级、6DOF、支持眼手追踪的 AR 眼镜的,尽管目前的技术水平还只能做到 70° 的 FOV(在 AR 眼镜中,这已经是一个非常大的 FOV 了),但这已经是一个非常好的开始了(如果细心看国外媒体的评测,你就会发现 Orion 目前 70° 的 FOV 在佩戴时还是能明显看到可截断的边缘的,起码会让人有一种非常明显的“出戏”的感觉)。
更多关于 Orion 的细节信息,已经有很多非常好的文章做了详细的介绍,感兴趣的话也可以点击来看看:
Meta 发布了 Meta Spatial SDK
熟悉当年 Android 和 iOS 相爱相杀历史的开发者,一定对这一幕不陌生:Meta 发布了一个全新的在 Quest 上开发的 SDK——Meta Spatial SDK,用这个 SDK,你可以使用 Android Studio 和 Kotlin 在 Quest 上进行空间应用的开发(这两样东西对于 Android 开发者可再熟悉不过了)
在 Android Studio 中,你可以基于 XML 来编辑空间应用的 UI:
还可以用类似 visionOS 开发用到的 Reality Composer Pro 的 Meta Spatial Editor 中编辑 3D 场景:
不得不说概念是真一致,同时官方还放出了 10 个 Sample Code,感兴趣的小伙伴可以直接去 Github 并根据 文档 来快速上手玩一下。
Apple 提供了新的 visionOS Sample Code
最近,Apple 提供了新的 visionOS Code Sample,比起之前相对来说是一个完整大工程的 Sample Code,此次的 Sample 挑选的都是相对比较简单的小工程,适合初学者入门。
Tools
PICO Emulator(Beta)
PICO 最近在官网上发布了一个新的 Debug 工具:PICO Emulator,其主要功能就是能够在 PC 和 Mac 上模拟运行原本需要运行在 PICO 真机上的应用,你可以通过 adb 或者直接拖拽 apk 来进行安装。同时,模拟器本身也支持了键盘和手柄的映射。
App
Story: Spatial Storytelling
Story 是一个可以为 Apple Vision Pro 用户带来极致沉浸式视频体验的 App。在这里,你不仅可以观看像这样的通过图片、模型、文字组合起来的 360° 沉浸式视频:
还可以沉浸式查看清晰度为 16K 的风景视频:
目前 App 中已经有五个视频,并且更多的视频将会在后续陆续放出。
作为一款沉浸式视频播放应用,Story 令人惊喜的有两点,第一点是高达 16K 的视频清晰度(这和 Apple Vision Pro 的分辨率搭配起来真是绝配),在观看风景时,极致的清晰度真的会让你眼前一亮。
第二点,则是 Story 背后的愿景:让更多的人能够制作这样的空间视频,因此我们更可以说 Story 是一个内容平台,来看看在 Vision Pro 中就可以使用的编辑器:
Code
SGMExamples:Shader Graph Material Examples in visionOS
要想做出炫酷好看的 App,Shader Graph 绝对是 visionOS 开发者所必备的技能之一。但无奈官方只有文档,而缺乏一些更进一步的例子,这就给初学者带来了一定的困难。
但现在,拥有 SGMExamples,你就可以通过这个项目来更好的学习 Shader Graph 的使用,这个项目中包含了很多高级的 Shader Graph 使用场景,这个水波纹就是其中之一:
非常感谢 Yasuhito 开源了这么好的项目
RealityMixerVisionPro:Mixed Reality Capture app for the Vision Pro
所有使用 Apple Vision Pro 的朋友们可能都遇到过一个问题:旁边的人看不到你眼镜里的内容,尽管我们可以通过投屏来解决这个问题,但这个方案并不是最优的。
非常感谢 Fabio Dela Antonio 在这个问题上做出的尝试,通过 RealityMixerVisionPro,你可以将 Vision Pro 看到的内容以立体的形式投射到手机上,这样你的朋友就可以看到你眼镜里的内容了。