Les récentes découvertes en data mining suggèrent que les recherches de longue date de Meta sur les avatars Codec pourraient être implémentées sur des casques autonomes plus tôt que prévu, avec un support pour Messenger visant à concurrencer Apple.
Les avatars Codec sont l’une des technologies les plus prometteuses attendues dans l’espace VR/AR dans les années à venir, voire les décennies. Ces avatars sont des représentations virtuelles très réalistes des personnes, se distinguant des avatars plus cartoon actuellement utilisés par Meta. Ils atteignent un niveau d’hyper-réalisme qui surmonte avec succès la vallée de l’étrange, un défi qui a tourmenté des technologies similaires dans le passé.
Meta travaille sur cette technologie depuis plusieurs années. Jusqu’à récemment, nous n’avions vu que de brèves vidéos de prototypes enregistrées dans des conditions parfaites utilisant des équipements de caméra coûteux. Cependant, cela pourrait bientôt changer, car Meta teste actuellement les avatars Codec sur un appareil autonome.
Meta teste cette technologie sur des appareils autonomes depuis un certain temps. Il y a un an, Andrew Bosworth, le CTO de Meta, a mentionné dans son AMA sur Instagram que Meta faisait des « progrès » sur les avatars Codec pour les casques autonomes, mais qu’ils étaient encore « à des années » de leur réalisation complète.
Récemment, l’enthousiaste de la VR, Luna, a découvert des références aux avatars Codec dans la version v68 PTC de Meta Quest. Ces découvertes suggèrent que Meta travaille sur la prise en charge des avatars Codec pour les appels vidéo Messenger.
Quand les avatars Codec seront-ils disponibles sur les casques autonomes ?
Selon la feuille de route divulguée de Meta par The Verge l’année dernière, les avatars Codec seront une caractéristique majeure sur le prochain casque Quest Pro de Meta, surnommé « La Jolla ». Ce rapport a également fourni des détails sur les Quest 3 et Quest 3s.
Le Quest Pro 2 devrait être lancé en 2027, selon des fuites récentes d’une source très fiable, qui discutent également des dates de sortie prévues pour les Quest 4 et Quest 4s.
Le Quest Pro 2 comportera, bien sûr, le suivi des yeux et du visage, tout comme son prédécesseur. Ce suivi est crucial pour les avatars Codec, donc nous ne les verrons pas sur des casques comme le Quest 3… ou le verrons-nous ?
Meta a démontré une version des avatars Codec qui ne nécessite pas de suivi du visage ou des yeux. Au lieu de cela, les mouvements du visage sont estimés à partir de l’audio capturé par le microphone du casque. Bien que cette méthode ne soit pas idéale pour obtenir des expressions faciales riches, elle pourrait servir de solution intermédiaire décente pour les utilisateurs actuels de Quest 3 et Quest 2.
En 2021, Meta a démontré une méthode efficace pour décoder les avatars Codec sur Quest 2. Cette méthode permettait de rendre un avatar Codec à 72 FPS, trois à 63 FPS et cinq à environ 43 FPS. Étant donné que le Quest 3 est nettement plus puissant que le Quest 2, nous pouvons nous attendre à des performances encore meilleures.
Bien que la perspective des avatars Codec sur les casques autonomes soit excitante, il est important de ne pas s’attendre à la même qualité que celle vue dans l’interview de Lex Fridman avec Mark Zuckerberg. Les avatars sur les appareils autonomes pourraient ressembler davantage à ceux de la démo d’avatar Codec de Meta, qui utilisait un smartphone pour un scan rapide du visage.
