今年 6 月初,苹果在其位于加州的总部举办了一年一度的 WWDC 全球开发者大会,开创空间计算时代的 Vision Pro 如期亮相。 毫不奇怪,Vision Pro重新激活了公众对XR(扩展现实)的讨论,并为许多XR制造商带来了新的信心和想法。
6月底,XREAL创始人兼CEO徐驰在MWC上海接受采访时表示:
对于中国的VR AR行业来说,这是激动人心的一年。 苹果mr头显的问世,让整个行业看到了未来的方向。 」
很多人都看过下个月(2024 年 1 月)发布的 Vision Pro,却错过了 6 月初的 WWDC 大会,苹果也在会上向开发者推出了新的互联网标准——L4S。
L4S 是一种新的互联网标准和技术,它允许发送方及时调整发送速率,以避免在瓶颈处排队和延迟,方法是在 IP 报头中使用显式拥塞通知 (ECN) 机制来标记在瓶颈处遇到拥塞 (CE) 的数据包。 因此,L4S 可以显著减少通过网络传输的数据包的延迟和抖动,同时保持高吞吐量。
按照示例应用(调用)中的 Apple 演示和说明进行操作。启用 L4S 支持后,所有关键网络指标都得到了显著改善,即使在高负载(大量设备连接到网络的情况下)也能在移动中实现流畅、高清**的通话。
图:苹果。 事实上,Apple 已经在 iOS 17、iPadOS 17 中支持 L4s,并且率先在 Safari 上实现了它。 这意味着 Apple 的设备可以利用 L4S 提供的低延迟、低丢包、可扩展的吞吐量网络体验来获得更好的性能。
几乎在WWDC的同时,苹果还与NVIDIA、Valve和Comcast进行了业界首次L4S现场试验。
虽然苹果还没有透露Vision Pro是否会在VisionOS系统上支持L4S不过,考虑到 VisionOS 基于 iPadOS 和 XR 对更高网络性能的需求,推测 Vision Pro 也应该支持 L4S,以提供低延迟、低丢包和可扩展吞吐量的网络体验。
但作为一种新的互联网协议,L4S能否改变XR的明天?
L4S 是一种新的互联网技术,代表低延迟、低损耗和可扩展吞吐量,诺基亚贝尔实验室和国际互联网工程任务组 (IETF) 的其他合作伙伴正在对其进行标准化。
互联网工程任务组成立于2024年,是全球最权威的互联网技术标准化组织,其主要任务是负责互联网相关技术规范的制定和制定。众所周知,网络通信的本质是数据包在光缆和电磁波中的连续传输。 L4S 的目标是通过为实时应用提供低延迟、低丢包和可扩展吞吐量的网络服务来提高网络的效率和质量其中一个核心是使用基于ECN机制TCP Prague的新拥塞控制算法。
图诺基亚。
通过使用 IP 报头中的 ECN 机制来标记在网络瓶颈处遇到拥塞 (CE) 的数据包,TCP Prague 允许发送方及时调整发送速率,以避免瓶颈处的排队和延迟。 苹果在 iOS 17 和 iPadOS 上实现了 TCP Prague,可以根据网络的实时状态动态调整发送速率,而不是像传统 TCP 那样使用锯齿形波形的速率变化。
即使发生拥堵,设备也会进行调整,以防止拥堵变得更加严重,甚至完全消除拥堵。
从根本上说,TCP Prague可以实现无级变速,即可以在不同的网络环境下保持最优速率,在保持高吞吐量的同时大大降低延迟和抖动,提高网络效率和质量。
图:苹果。 Cablelabs的技术专家Greg White参与了该标准的开发,他指出: 在某些情况下,网络缓冲延迟通常为数百甚至数千毫秒,但L4S可以将其减少到毫秒。 公开数据显示,L4S的超低时延网络传输可以将端到端时延降低到毫秒级
甚至微秒级。
此外,L4S 还可以抑制延迟抖动,提高网络可靠性和质量通过避免瓶颈处的队列和延迟来减少数据包丢失和重传,包括根据有损和无损网络传输的应用程序需求动态调整数据包丢失率充分利用网络带宽,实现可扩展、高吞吐量的网络传输。
XR作为一项具有巨大潜力和前景的技术,可以应用于教育、娱乐、医疗、工业、军事等各个领域。 同时,XR也是一种对网络的性能和质量要求很高的技术,需要网络提供高吞吐、低丢包、低抖动、低时延的服务,以保证XR的效果和体验。
L4S可以有效改善XR体验中的一些常见问题,如延迟导致的眩晕、视觉和触觉不一致、数字内容与真实场景不匹配等。
AR 体验中的延迟问题,图 youtube@umeaenergi
此外,在Vision Pro的初次体验中,超低延迟无疑是一个高频词,很多人都提到了Vision Pro在透视模式下的逼真画面,延迟极低。 据苹果公司称,动态延迟仅为 12 毫秒,比眨眼快 8 倍。
然而,Vision Pro不仅要解决MR特有的透视延迟,还要解决AR、VR、MR都面临的实时云渲染画面延迟问题。
由于尺寸、续航、发热等因素的限制,XR设备的算力始终受到限制,即使Vision Pro搭载了两颗桌面级自研芯片,也仍要面对计算性能与需求之间明显的矛盾。 据英国《金融时报》报道,苹果工业设计团队与苹果首席运营官杰夫·威廉姆斯(Jeff Williams)在头显产品规划上的矛盾在于:
杰夫·威廉姆斯(Jeff Williams)希望团队尽快推出AR产品的第一个版本,但工业设计团队希望耐心等待,直到更轻的AR眼镜在技术上变得可行。
Vision Pro,图苹果。
如果我们能够将适合大规模计算的渲染转移到云端,实现实时云渲染,可能会突破算力的束缚,在画质、便携性、续航等方面实现全方位提升。 还实时云渲染的问题在于它增加了一个基于网络的流链接,使控制图像延迟变得更加困难。
L4S不仅实现了极低的时延,还抑制了延迟抖动,减少了丢包和重传,从而提高了XR的可靠性和质量,为XR带来了更自然、更逼真的体验,提高了用户的沉浸感和用户体验。
平心而论,XR仍然面临着许多技术和产品挑战,包括......性能、电池续航时间和延迟所有这些都是使XR真正成为下一代计算平台的重要因素。 L4S 当然无法解决 XR 面临的所有问题,但它无疑可以通过实时云渲染来提升 XR 的网络体验,甚至缓解 XR 设备的性能压力。
就像胡说的,恐怕真相无穷无尽,每一寸进步都有一寸喜悦。 XR希望取代智能手机成为下一代主流计算设备,每一寸都是值得的。
优质作者名单