Студенты Мюнхенского технологического университета, находившиеся на практике в корпорации Meta, опубликовали раннюю статьи под названием Avat3r. Статья описываает новый способ генерации реалистичных анимирумых аватаров лица.
В отличие от предыдущих способов создания аватаров, новый полагается на обученную большую реконструкционную модель, которая за несколько минут дообучается на одной или нескольких фотографиях и генерирует облако гауссиан, которое потом показывается в VR.
Модель, правда, не очень производительна – 8 кадров в секунду на RTX3090 – но и исследование было произведено не для запуска коммерческого продукта, а для того, чтобы предложить работу в компании. Может, через несколько лет мы всё-таки увидим какую-нибудь из версий этих аватаров доступной на всех гарнитурах Quest.
Источники: