На трансляции конференции WWDC 2026 гарнитура Apple Vision Pro получила всего пару упоминаний — в виде анонса функции конвертации панорамных фото в кастомные гаусианные окружения и как неловкое демо яблочного интеллекта в духе «что у меня за рюкзак на столе».

Несмотря на это, страница документации VisionOS 27 оказалась куда боле подробной. Так, один из пунктов улучшения упомянул обновление системы отслеживания объектов. Уже существующая система отслеживания по 3D-моделям стала работать на большей частоте, а новое API позволит получать данные отслеживания объектов без дополнительных яблочных коррекций для более точного трекинга.

Более того, компания уделила отдельный абзац и ещё не опубликованное видео функции, которая должна была появиться у всех гарнитур ещё много лет назад. Apple объявила, что компании и разработчики смогут делать кастомные инфракрасные трекеры, отслеживаемые гарнитурой в пространстве и способные иметь произвольные кнопки/тачпады; для этого понадобятся инфракрасные светодиоды, IMU-датчик, а также плата с микроконтроллером и нужные кнопки/тачпады/вибромоторы. Компания заявила, что именитые производители DIY-модулей DFRobot и MikroE выпустят в этом году готовые образцовые наборы для создания своих трекеров.

Для создания своего трекера понадобится проделать подозрительно знакомые шаги — импортировать точную 3D-модель отслеживаемого объекта в специальную утилиту, расставить светодиоды на ней, указать углы IMU-датчика и запустить специальную утилиту тренировки модели машинного обучения, которая может тренировать модель от одного до двух дней, хотя компания и упоминает, что большая оперативная память и более мощный процессор могут сильно ускорить процесс. После этого модель объекта и модель машинного обучения запекаются в специальный файл, который полностью описывает отслеживаемый аксессуар.

Главный минус, правда, в том, что гарнитура может так отслеживать всего два трекера. Иными словами, её хватит максимум на пару кастомных контроллеров или (если повезёт) пару трекеров тела.

Интерфейс VisionOS уже получил отдельное меню «отслеживаемых аксессуаров» и специальный тестовый режим проверки ИК-трекеров — по сути режим показа мира в чёрно-белых тонах инфракрасных камер.

Компания, известная тем, что почти не позволяла делать кастомные аксессуары для своих устройств, первой среди конкурентов разрешила делать кастомные инфракрасные трекеры поверх своей системы трекинга; единственной компанией до Apple, позволившей себе такое, была Valve с намного более сложными Lighthouse-трекерами; Pico приблизилась к этому, но ограничилась готовыми маленькими трекерами.

Теперь, может, настанет очередь и Meta с Pico.


Источники: