Суть в том, что система определяет, куда вы смотрите, и передает именно эту область кадра в максимальном качестве, а периферию — с меньшим разрешением. Это как человеческое зрение: в центре четко, по краям размыто.

Фишка в том, что это низкоуровневый API, который может использовать любой PC VR сервер (не только Mac). Apple подружилась с Nvidia — теперь есть поддержка CloudXR SDK. Но увы, нужны свежие RTX 40-й или 50-й серий, старые карты не потянут.

Что уже работает:

• X-Plane 12 и iRacing делают нативные клиенты — подключились, и симулятор сам распознает ваши педали с рулем через камеру, покажет их в passthrough
• Autodesk VRED уже стримит на Vision Pro автопроизводителям (Kia, BMW, Volvo, Rivian используют для дизайна)
• Clear XR в TestFlight — любой OpenXR шутер/экшен можно стримить с foveated streaming

Еще одна крутая фича — аудио теперь «запоминает» вашу комнату. Раньше Audio Ray Tracing сканировал помещение каждый раз заново, теперь Vision Pro хранит акустические профили комнат. Зашли в гостиную — звук сразу подстроился, без лишних движений.

Для разработчиков это вообще революция — впервые visionOS дает доступ к данным о том, куда смотрит пользователь (раньше Apple это скрывала ради приватности, давала только информацию о жестах). Теперь можно не только стримить, но и рендерить в высоком разрешении именно точку взгляда.