Кодек Avatars 2.0: Meta прагне реалізму в метавсесвіті

Метаінженери наближаються до певної форми реалізму для метавсесвіту за допомогою Codec Avatars 2.0, прототипу аватарів віртуальної реальності, які використовують передові методи машинного навчання.

Три роки тому дочірня компанія Meta Facebook представила свою роботу з Codec Avatars. Підтримувані кількома нейронними мережами, аватари генеруються за допомогою спеціального пристрою захоплення зі 171 камерою. Після створення ними можна керувати в режимі реального часу за допомогою прототипу віртуальної гарнітури з п’ятьма камерами (дві внутрішні для кожного ока та три зовнішні для нижньої частини обличчя). З тих пір команди, що стоять за проектом, представили кілька вдосконалень системи, включаючи більш реалістичні очі та версію, яка потребує лише відстеження погляду та введення мікрофона.

У квітні минулого року на семінарі Массачусетського технологічного інституту «Віртуальні істоти та бути віртуальним» Ясер Шейх представив нову версію Codec Avatars. Незважаючи на значні та важливі події, попереду ще довгий шлях: «Я б сказав, що одним із великих викликів наступного десятиліття є визначення того, чи зможемо ми забезпечити дистанційну взаємодію, яку неможливо відрізнити від спілкування віч-на-віч». Під час воркшопу він зазначив, що неможливо передбачити, як скоро Codec Avatars насправді буде випущено. Однак він сказав, що коли проект починався, було десять чудес, а тепер він думає, що їх п’ять.

Реалістичні аватари з кодеком Avatars 2.0 для Meta

Проте Codec Avatars 2.0 може бути окремим рішенням, а не прямим оновленням поточних аватарів мультфільмів. В інтерв’ю Лексу Фрідману генеральний директор Марк Цукерберг описав майбутнє, коли користувачі зможуть використовувати аватар у стилі мультфільму в казуальних іграх і реалістичний аватар на ділових зустрічах.