Une expérience immersive sans rien porter sur la tête
Vers la fin du salon CP+ de Yokohama, au Japon, j'ai eu l'occasion de tester en avant-première les écrans immersifs Sony XYN. Concrètement, nous nous sommes retrouvés face à trois de ces dispositifs, et la sensation était troublante : cela ressemblait à s'y méprendre à l'expérience de l'Apple Vision Pro, mais sans rien avoir à enfiler sur la tête.
La meilleure façon de décrire cette technologie, c'est d'imaginer une combinaison entre ce que certains fabricants d'écrans holographiques ont développé et l'expérience procurée par un casque Vision Pro. Les écrans XYN utilisent une caméra pour suivre les yeux et les mouvements de l'utilisateur, puis projettent des couches visuelles distinctes à chaque œil grâce à une technologie d'affichage brevetée. Le résultat ? Une impression de profondeur réelle, totalement immersive, sans la moindre fatigue oculaire.
Une profondeur qui ne fait pas mal aux yeux
Souvenez-vous des vieilles télévisions 3D ou de l'effet 3D de la Nintendo 3DS — au bout d'un moment, la tête commençait à tourner. Avec le Sony XYN, rien de tout cela. La profondeur semble authentique.
Lorsqu'on s'approche d'un écran XYN pour la première fois, l'image paraît complètement brouillée, presque incompréhensible. Mais dès que la caméra détecte vos yeux, tout bascule : la photo s'ancre dans l'espace avec une profondeur immédiate et saisissante. On peut ensuite se pencher sur les côtés, s'accroupir légèrement ou se redresser pour découvrir d'autres angles de la scène. La liberté de mouvement est étonnamment généreuse, à condition de garder les pieds au sol.
Le revers de la médaille ? Cet effet étant entièrement lié à la position des yeux détectée par la caméra, il est impossible à capturer en photo ou en vidéo. Tout comme il faut porter un Vision Pro pour vraiment comprendre ce qu'est une photo immersive, il faut se tenir devant un écran XYN pour saisir toute la magie de la chose.
Un obstacle à la démocratisation
C'est probablement le plus grand frein à l'adoption massive de cette technologie — un défi que l'Apple Vision Pro connaît lui aussi très bien. Quand chaque client potentiel doit absolument vivre l'expérience en personne pour « comprendre », le coût des produits et des espaces de démonstration devient un véritable obstacle commercial.
Bien plus qu'un simple écran
Il faut préciser que Sony XYN ne se résume pas à une technologie d'affichage. Contrairement à d'autres solutions similaires sur le marché, XYN est un écosystème complet conçu pour accompagner tout le processus, de la capture à la diffusion. Le Vision Pro d'Apple et les appareils photo iPhone s'en rapprochent conceptuellement, mais Apple s'appuie sur deux objectifs imitant les deux yeux humains pour créer la profondeur, tandis que Sony y parvient avec un seul appareil photo et un workflow guidé.
Les photos immersives présentées au salon CP+ ont été capturées avec des appareils photo Sony Alpha. La firme travaille également sur une technologie cloud permettant à n'importe qui de générer des ressources 3D de haute qualité pour n'importe quel objet, quel que soit son niveau en photographie. Les utilisateurs sont guidés tout au long de la prise de vue via l'application XYN.
Grâce à une technologie propriétaire, Sony affirme être capable de créer des reproductions photoréalistes d'espaces et d'objets réels dans des environnements XR, capturant fidèlement même les surfaces réfléchissantes et les détails les plus fins — des éléments qui étaient jusqu'alors difficiles à reproduire.
La capture de mouvement intégrée
XYN est également compatible avec mocopi, les capteurs de capture de mouvement compacts de Sony qui se fixent en seulement six points sur le corps. Il devient ainsi possible de créer des rendus 3D immersifs du mouvement humain ou d'animer des avatars numériques à partir de ces données.
Des photos fixes encore plus immersives que sur Vision Pro
Les images que nous avons visionnées au CP+ étaient des clichés fixes générés à partir d'une série de photos, et non des vidéos — ce qui illustre la polyvalence de l'approche de Sony.
L'une des fonctionnalités les plus séduisantes de l'Apple Vision Pro reste la possibilité de percevoir la profondeur dans ses propres photos. Apple y parvient en capturant ou en créant des cartes de profondeur, puis en extrapolant ces données par logiciel — une approche ingénieuse qui permet de rendre n'importe quelle photo immersive. Mais cette méthode a ses limites : on n'aperçoit que légèrement ce qui pourrait se trouver derrière les objets. Avec XYN, la profondeur perçue est environ deux fois plus importante.
Devant les exemples présentés, nous pouvions réellement déplacer notre tête pour regarder derrière et autour d'une scène avec une amplitude bien supérieure à ce qu'offre le Vision Pro. Logique : ces photos ont été prises spécifiquement pour générer ces points de vue immersifs. En contrepartie, la création de contenus pour XYN est plus complexe, et une photo existante ne peut pas être rendue immersive aussi facilement qu'à l'intérieur d'un Vision Pro.
Deux technologies complémentaires
Le Vision Pro garde certains avantages que XYN ne pourra jamais offrir, comme les réunions en réalité virtuelle ou toute expérience qui demande à l'utilisateur d'être totalement plongé dans un monde virtuel. Mais pour tout ce qui peut simplement s'afficher sur un écran, XYN offre une liberté physique considérablement plus grande. Il y a une place pour ces deux technologies.
Un prototype prometteur, une vision d'avenir
Pour l'instant, Sony développe XYN exclusivement avec ses propres produits. Des représentants de la marque m'ont toutefois confié qu'ils exploraient des pistes de collaboration avec ce qu'Apple est en train de construire — une perspective intéressante, d'autant qu'Apple a déjà noué des partenariats avec Blackmagic et Canon pour élargir les usages de sa technologie.
Même si nous sommes encore aux prémices de l'espace immersif et que Sony XYN reste majoritairement un prototype, la direction est claire. En tant qu'artiste, l'idée de concevoir une galerie de photos immersives pensées pour provoquer un sentiment d'émerveillement est une perspective enthousiasmante. Du côté professionnel, les applications pour les designers, architectes et ingénieurs souhaitant manipuler des assets 3D comme s'ils les voyaient dans le monde réel sont nombreuses.
Quoi qu'il en soit, pour l'heure, Sony XYN est une idée vraiment brillante — et une expérience qui se vit bien plus qu'elle ne se raconte.
