Apple выпустила первую бета-версию visionOS 2.6.4 для Vision Pro, где ключевым нововведением стало поддержка foveated streaming в рамках NVIDIA CloudXR. Эта технология позволяет приложениям и играм транслировать высококачественный контент с удаленного сервера или ПК, фокусируясь на высокой детализации только в области взгляда пользователя, что снижает задержки и нагрузку на устройство.
Техническая суть foveated streaming
Foveated streaming использует данные о направлении взгляда для рендеринга полной резкости лишь в центральной зоне зрения, периферия передается в пониженном разрешении, что экономит пропускную способность и ресурсы M2-чипа Vision Pro. Интеграция с CloudXR от NVIDIA открывает путь для портирования VR-приложений с десктопов или облака без полной переработки под visionOS, сохраняя приватность — сервер получает лишь приблизительную информацию о фокусе. Apple подчеркивает совместимость с RealityKit: локально рендерятся простые элементы вроде приборной панели в гоночной игре, а сложные сцены вроде внешней трассы стримятся извне.
Практические применения в Vision Pro
В симуляторе полетов кабина обрабатывается на устройстве через RealityKit, а ландшафт — на мощном удаленном GPU, что повышает реализм без перегрева или потери кадров. Для разработчиков это упрощает адаптацию существующих VR-проектов, а для пользователей — доступ к ресурсоемким приложениям вроде CAD или 3D-моделирования без компромиссов по качеству. Пока неизвестно, применит ли Apple эту функцию в своих приложениях вроде Photos или Safari, но документация уже доступна для тестов в бета-версии.
