Les Personas dans VisionOS 26 : Un Bond Qualitatif
Avec VisionOS 26, Apple offre une amélioration visuelle considérable à ses avatars Persona sur le Vision Pro. Après avoir expérimenté ce nouveau système, il est difficile de ne pas être impressionné.
Cependant, une question cruciale subsiste : comment Apple surmontera-t-elle le défi de transposer ce niveau de fidélité sur des casques plus petits, où l’espace pour les caméras, essentielles à cette technologie, est encore plus réduit ?
Une Évolution Spectaculaire
Le système actuel de Persona sur VisionOS 2 était déjà le système d’avatar virtuel en temps réel le plus réaliste du marché.
Mais Apple relève encore la barre avec une mise à jour prévue dans VisionOS 26. L’entreprise est si satisfaite des résultats qu’elle enlèvera l’étiquette « bêta » de la fonctionnalité Persona.
Lors du WWDC la semaine dernière, j’ai pu essayer la nouvelle technologie Persona moi-même, et je dois dire qu’elle est aussi impressionnante que ce qui avait été montré lors de leur présentation initiale.
« Notez que si la bouche devient floue, c’est parce que j’ai mis ma main devant, obstruant la vue des caméras du bas du casque. Et si le mouvement semble ‘non naturel’, c’est intentionnel ! J’ai délibérément fait des mouvements et poses inhabituels pour observer comment le système les interprétait. »
Bien que la procédure de capture reste inchangée, utilisant les mêmes caméras du casque et traitant tout sur l’appareil, les résultats sont nettement améliorés.
La peau semble bien plus détaillée ; j’ai été particulièrement impressionné par la finesse de capture de ma barbe. Les cheveux sur la tête sont eux aussi plus détaillés.
Ce qui est peut-être encore plus frappant, c’est la capacité du système Persona à capturer le mouvement du visage avec une précision étonnante. Vous pouvez me voir bouger mon visage de façons inhabituelles et asymétriques, mais les résultats demeurent nuancés et réalistes. Il n’est pas clair si la cartographie de mouvements a été mise à jour dans cette nouvelle version de Personas, ou si cela semble simplement plus réaliste car le scan sous-jacent est désormais plus détaillé.
Apple a également confirmé à Road to VR que ces améliorations sont reportées sur la version de Persona utilisée par l’affichage externe « EyeSight ». Bien que la luminosité et la résolution de cet affichage externe limitent actuellement son potentiel, le Persona affiché à l’extérieur du casque devrait apparaître un peu plus détaillé et réaliste.
Dans l’ensemble, la sensation de « côté fantomatique » des Personas est fortement réduite. Cependant, les mains restent floues (et peut-être même plus qu’elles ne le seraient normalement, car il y a maintenant un plus grand contraste entre le flou des mains et la solidité du visage).
Réduire la Taille Tout en Conservant la Qualité
Ce développement est un saut évident dans la qualité visuelle des Personas, mais une grande question qui persiste dans mon esprit est : comment Apple pourra-t-elle maintenir ce niveau de qualité sur des casques plus petits à l’avenir ?
Il ne s’agit pas seulement d’avoir un casque plus compact nécessitant d’être plus économe en énergie pour réaliser la même quantité de calculs dans un espace plus réduit. Ni simplement d’avoir moins de place pour intégrer des caméras.
La clé qui rend les Personas possibles est que les caméras sur le casque offrent une ligne de vue vers la bouche, les joues et les yeux de l’utilisateur. C’est cette vue « vérité terrain » brute qui doit être interprétée pour cartographier avec précision le mouvement du visage sur l’avatar virtuel.
Ce procédé n’est pas trop compliqué lorsque l’on a une image frontale complète du visage de quelqu’un. Mais cela devient de plus en plus difficile à mesure que l’angle de vue devient plus extrême. C’est pourquoi les premières technologies de suivi facial avaient généralement une caméra placée bien en avant de l’utilisateur (pour avoir une vue claire et non déformée).
Imaginer des Solutions Innovantes
Certaines entreprises, comme Meta Reality Labs, se sont montrées ingénieuses. Pour des casques comme le Quest Pro et le Vision Pro, une option pour résoudre ce problème d’angle aigu est d’entraîner un algorithme à voir à la fois une vue dégagée du visage de l’utilisateur et une vue à angle aigu simultanément.
Cela permet à l’algorithme de mieux prédire comment la vue dégagée se mappe à la vue à angle aigu.
