新闻中心

实测苹果Vision Pro空间视频体验，记者们：震撼！情绪价值拉满！Killer APP

发布时间：2024-11-04 点击量：

熊嘻嘻

自己在手机上拍摄的空间视频放在Vision Pro上是种什么体验，最近苹果再次邀请记者实测体验，大家准备好自己拍摄的日常空间视频/照片，普遍感受：震撼！回忆感立体！情绪价值拉满！

苹果邀请媒体体验 Vision Pro 上的空间视频:“几乎让我落泪”

苹果最近又邀请了一批记者试用 Vision Pro。这次,Apple 允许这些记者使用 Vision Pro来重温他们自己拍摄的空间视频。前几天Apple 已在 iOS 17.2 中增加了对 iPhone 15 Pro 手机拍摄空间视频的支持：iOS 17.2发布,人人都可在 iPhone上拍摄空间视频，拍摄技巧与细节曝光，苹果官方这么说！

CNET 的记者 Scott Stein 描述了他在 Vision Pro 上体验自己的空间视频的感受。他指出,30帧每秒的帧率限制“显然比较明显”,但结果仍令人印象深刻。

对我来说,最引人入胜的体验是播放我自己近距离拍摄与家人在一起的视频剪辑。其中一个剪辑是我在感恩节和妈妈以及姐姐坐在一起,告诉她我正在录制 3D 视频准备未来的项目。她稍稍扬起了眉毛,通过 3D效果看到她的样子,视角接近正常大小,她似乎与我有了眼神接触,这让我感觉就好像我几乎来到了那里。

在运动较少的情况下,帧率限制并不那么明显。这种更为私密的构图也更适合空间视频播放框架的封闭特性。

Inverse 网站的记者 Raymond Wong 也描述了“回顾”空间视频的情感体验:

在一个空间视频中,我和妈妈在餐馆吃点心,我向她解释 Apple Vision Pro 是什么,有什么功能。这个视频是上周录制的,所以记忆还很新鲜。在 Vision Pro 中回顾这个视频,就好像我们真的回到了餐馆,坐在桌子两边。

我不断地歪着头,简直不敢相信看到妈妈在空间视频中聊天、大笑和吃东⻄是多么超现实。是妈妈让我对技术感兴趣的,如果不是她对这方面的兴趣,我想我也不会有机会写关于新消费技术的文章。所以对我来说,这种对话非常宝贵,能够以高度仿真的方式回顾,真的触动了我的心弦。

有一刻,我忍着没有掉几滴眼泪,因为有 3 名 Apple 员工坐在我旁边。意识到 Vision Pro 的外部显示屏可能会显示我的眼泪,我问他们是否可以从那上面看到我的眼睛。他们告诉我看不到。这可能是因为软件还在预发布阶段。当然,身为佩戴 Vision Pro 的人,我自己也无法确认这一点。

以下是CNET记者Scott Stein体验的全过程：

熊嘻嘻

嗨,妈妈,你在 3D 中。这就是当我用自己的 iPhone 捕捉生活的时候,Apple 的记忆捕捉感受起来是什么样子。

这是我在 2023 年第三次看到 Apple 的 Vision Pro。这次,我没有看 Avatar,也没有看苹果的测试照片或视频。我看到的是感恩节的妈妈和姐姐,孩子和侄子一起弹吉他和钢琴,以及我在自然历史博物馆里追着儿子跑进发光岩石展厅。

Apple 本周更新了 iOS 17.2,为拥有 iPhone 15 Pro 和 iPhone 15 Pro Max 的用户添加了录制 3D“空间”视频的功能。你要到明年才有机会在 Vision Pro 头显上看到这些 3D 视频的样子,但我看到了。让我告诉你我的体验。

几周前,我已经有机会看了 Apple 自己的空间视频样例,甚至测试录制了一个属于自己的。当时我对视频质量和 Vision Pro 出色的显示效果印象深刻。第二次体验有其独特的奇妙感觉;这是我自己生活中的东⻄,我自己的记忆。我在播放我已经亲身经历过的体验。

尽管命名为“空间”,但这些视频是立体 3D 的,而不是你可以四处走动的完整场景。我没法走近这些记录下来的记忆或者从侧面观看,但它们的确有些闪光点,也让我看到了空间拍摄和播放的局限性。

进入我自己的生活

我的照片和视频通过蓝牙发送到了一个与 Vision Pro 相关联的手机账号上,但最酷的部分是,任何拥有 Vision Pro 的人都会已经把自己的照片库和 Apple 生态系统中的其他所有内容同步过去了。戴着 Vision Pro 眼镜往下瞥一眼,用手指点击接受一个蓝牙发送过来的文件,这让我感到一种熟悉的惊喜。

我看了 10 个自己拍摄的空间视频样例,以及几张来自 Storm King 艺术中心和英格兰西南部全景照片,和一些我和家人在 Meadowlands DeKorte 公园的 HDR 照片。照片看起来很棒,质量至少跟在我的 Mac 或者电视上一样好或者更好。HDR 效果非常出色,放大后也很有趣。正如我上次所说,在如此高刷新率的头显 Vision Pro 上观看全景照片,有其独特的身临其境感,显示分辨率也让照片的质量得以充分发挥。

空间视频有自己特定的构图方式,被模糊的边框包围着,这有助于掩盖视频没有想象中那么充满整个屏幕的事实。在第二次体验中我更加注意到这一点。普通的非空间视频可以通过手指捏合放大,但立体 3D 空间视频不行。我希望它们可以放大一点点。

Apple 对空间视频拍摄也有自己的建议,比如不要移动太多,待在光线充足的区域。我打破了其中的许多规则,到处乱晃,有时进入阴暗的空间(例如与 CNET 同事在一个昏暗的酒吧,或者博物馆和其荧光闪烁的岩石)。但结果仍然很好,光线更充足的地方效果更加突出。

30 帧每秒的帧率限制在运动中也十分明显。我希望可以达到 60 帧每秒。如果有人快速跑过,比如我追着孩子穿过中央公园,在旁边的池塘边爬岩石,这个帧率有时对我来说太过于不流畅,尤其是在 Vision Pro 这样非常高刷新率的头显上。

亲密时刻的闪光点

对我来说最引人入胜的体验是播放我用手机近距离拍摄家人的视频剪辑。一个剪辑是感恩节我和妈妈、姐姐坐在餐桌边,告诉她我正在为一个未来的项目录制 3D 视频。她扬起了眉毛,通过 3D 效果看到她的样子,接近正常人大小,她似乎正看着我的眼睛,这让我感觉就像我几乎来到了那里。这让我想穿过那个模糊的窗口,重新加入家人。

在运动较少的情况下,帧率限制并不那么明显。这种更为私密的构图也更适合空间视频播放框架的封闭特性。

我也很高兴在 3D 中看到一些最喜欢的自然历史博物馆展品。我去了海洋生物大厅,顶楼有 3 个小水箱,展示史前海洋生物的微景观,这是我从小就喜爱的展览。我捕捉到了菊石和三叶虫,在展箱之间游移。在 Vision Pro 上以 3D 形式再次看到它们,感觉就像重温家中的微缩景观。这让我看到了捕捉小型沉浸式装置或空间的乐趣,以及让它们再次出现在你面前的魅力。考虑到主题,在那个模糊的框架中,这种比较小的规模真的很迷人。

再次见到未来的 Vision Pro

这就是我的第三次 Vision Pro 演示体验了,但很短暂。这次感觉就像我和我的一些东⻄在头显上度过了小小的时光,预示着对任何已经深深融入 Apple 生态系统的人来说,Vision Pro 准备好立刻连接你自己的东⻄,会是什么样的体验。

我仍然认为 Vision Pro 的显示效果非常漂亮,尽管它戴在我脸上的感觉和 Meta 的 Quest 头显非常相似。顺畅的界面仍然令人耳目一新,但我想知道 Apple 将如何进一步改进其空间视频的拍摄和播放,实现更多的控制、更高分辨率和更快帧率。此外,长期来看,期待它提供更多的播放控制选项。

熊可爱

【笔记拆解】苹果Vision Pro空间视频（技术详情/产品化方向）

以下是techradar记者Lance Ulanoff体验感受：

空间计算

创业者

我每次体验Apple的Vision Pro混合现实头显,感受都一样又有所不同。我把它比作剥洋葱:我认为我已经理解了它的手感和质地,但每次我都会注意到新的层次和风味,提醒我自己仍然不完全了解Apple这项尖端可穿戴技术。

在我第三次佩戴Vision Pro时,我有了一个比较独特的体验,那就是通过这个强大而昂贵的头显($3499,明年发售)查看我自己的内容。

几周前,Apple发布了iOS 17.2测试版,增加了在iPhone 15 Pro和iPhone 15 Pro Max上捕捉空间视频的功能(完整版本本周推出)。它是一种横向模式的视频格式,使用4800万像素主摄像头和1200万像素超广角摄像头创建立体视频图像。我几乎立即开始在该格式下捕捉视频,但有一个注意事项,并非每段视频都值得这种更具沉浸感的体验(你不能离拍摄对象太远,保持手机水平和稳定有助于效果)。但我还是准备了9段视频片段,用于我的第二次也是迄今为止最私人的Vision Pro空间视频体验。

在这第三次Vision Pro试用中,我试图更多地关注头显的一些设置和初始化细节。正如我之前提到的,Vision Pro是Apple最注重细节的硬件体验之一。如果你戴眼镜,你需要额外支付定制Zeiss镜片插件的费用——我在此次试用前提供了处方信息。目前还不清楚消费者可能需要等待多长时间才能拿到自己的镜片插件(Apple店里会有快速配镜服务吗?这很难说)。

当然,并非所有人都需要这些镜片或承受额外的费用和等待时间。如果你不戴眼镜,那你就比我这种人优势更大,隐形眼镜佩戴者也是如此。

做到个性化体验的重要性

尽管如此,在此之前我并没有注意到其他一些个性化定制。贴在你脸上的软垫连接到Vision Pro主体的磁性接口,有几种不同的曲率样式,以适应不同的典型人脸轮廓。我不知道Apple会提供多少种选择。

舒适的AR和VR体验的一个关键因素是匹配你眼睛的瞳距——你双眼中心之间的距离。这是我第一次注意到Vision Pro设置的第一步。在我长按头显上的数字冠状物后,一对大大的绿色图形出现在我眼前。它们测量我眼睛之间以及Vision Pro里面的距离,然后两块微LED显示器及其2300万像素的图像移动到与我眼睛的距离相匹配。如果你仔细听,可能能听到机械运作的声音。

我还注意到Vision Pro让我进行了三套不同的眼动追踪测试,在那里我需要看着一圈点,然后对每个点捏拇指和食指选择它们。进行三次这样的测试可能让人感到烦人(的确),但这一关键步骤可以确保Vision Pro的主要交互模式每次都可以完美工作。

我们从附近的手机上蓝牙传输了我的空间视频和全景图像。很高兴看到传输到Vision Pro上的过程非常流畅——我看到有人试图蓝牙传输内容,简单地看着“接受”然后捏拇指和食指。

当苹果的全景摄影在iOS 6中问世时,我拍了很多全景照片。画面中太快移动导致有两个头的人让我觉得很有意思。现在苹果已经解决了第一个问题——我注意到在最近的全景摄影中,没有那么多两个头的人了。不过最近我很少拍全景,只有四张不错的可以在Vision Pro上试用。

即便只有几个样本,我也被图像的质量和身临其境的特性惊呆了。我最喜欢的无疑是今年早些时候我从CES 2023的酒店房间用iPhone 14 Pro拍的照片。拍这些照片已经成了一种仪式。我喜欢看到拉斯维加斯的景色和天气,通常在社交媒体上分享一些,提醒大家我又回到了CES。

毫不夸张地说,这张从Planet Hollywood酒店相当高的位置拍摄的照片对我来说是个惊喜。不仅因为几乎环绕我头部的美景非常优美,而且这还是我第一次注意到当我看向图像的最右侧时,完整地反映出我本人在拍照。这是一个我在手机上查看全景图时从未注意到的细节,在身临其境的环境中意外地发现你自己,感觉非常奇特。

安地卡的一个全景也同样引人入胜。整体的清晰度和细节非常令人印象深刻,这应当归功于iPhone 14 Pro和iPhone 15 Pro Max的摄影功能。我大多数全景图都是以身临其境的模式查看的,但通过双手捏合和推动的手势,可以把全景图像放回窗口视图中。

空间视频体验：如下火车空间视频，我向你保证,在Vision Pro上查看时这个效果要酷多了

为了我的空间视频体验,我拍了感恩节晚餐、基督城卡罗尔歌手、公园散步、火车模型和与一个4岁小朋友互动的视频。

这些视频对我每个人的影响有些不同,但所有沉浸模式的视频都有一些共同点。在Vision Pro上可以在窗口中查看空间视频,但我更喜欢没边框的身临其境样式,每个3D视频就像一朵云一样呈现。空间视频的边缘不是硬边,而是渐变消失,所以真实世界和漂浮在你面前的世界之间没有明确的界限。这的确使视野减少了一些,特别是垂直高度和深度,当我在手机上查看空间视频时(它们看起来就像常规的平面视频),我可以从边到边看到所有捕捉的细节,但在Vision Pro的身临其境模式下,一些细节消失在上方和下方的虚无中。

在我的火车模型视频中,3D空间视频效果让我想起了早期电影观众的一个可能不是真实的故事,当他们看到一辆驶来的火车时,惊恐地从电影院里跑了出来。我不会说我的视频有那么强烈,但我的火车模型看起来就要直接骑到我的腿上了。

我很享受每一个视频,虽然我没有感觉进入其中任何一个,但每个视频都更真实了,我观看时的任何情绪也被加强了。我怀疑当消费者开始自己体验Vision Pro和空间视频时,他们可能会对家庭视频的情感级别感到惊讶——这可能相当强烈。

这仍然是一个短暂的坐式体验,我确定没有测试Vision Pro外部两小时电池组的续航力。我注意到如果要工作一整天,观看多个两小时电影,或者浏览大量空间视频,我可以直接将电源适配器连接的线缆插入电池组的USB-C端口。

参考：

https://www.techradar.com/computing/virtual-reality-augmented-reality/seeing-your-own-spatial-video-on-vision-pro-is-an-immersive-trip-and-i-highly-recommend-it

社区会员

最近新加入的uu们，拉满！三次方社区【AI工作流/数字人/XR/元宇宙/苹果眼镜】部分内容，每一条都建议收藏，vip成员们务必消化：

1、【数字人】目前做虚拟人/Vtuber直播的从业者，分享一套方案：基于 AI 的全身运动捕捉和扩展现实 (XR) 解决方案：

https://t.zsxq.com/109oyjMjB

2、【方案库】【基于大模型的Unity AI数字人方案】分享一个开源框架：

https://t.zsxq.com/10DFDFQ06

3、【工具库】做AI数字人/虚拟网红/虚拟偶像的必备的一个宝藏网站，尤其是做虚拟偶像的从业者务必收藏：

https://t.zsxq.com/10vLHTiSS

4、【AI工作流】用于游戏开发的AIGC工具（第二部分）：脚本代码生成、3D模型动画捕捉、语音生成、语音识别方向：

https://t.zsxq.com/10KQi6B5O

5、【苹果眼镜开发指南系列】苹果眼镜开发指南系列 -- 实战代码【30天开发挑战】--已更新到21天，这个项目值得一看：

https://t.zsxq.com/10d3jAoLN