Table des matières pour Mixed Reality et l'Apple Vision Pro - L'avenir de l'image de synthèse / de la 3D ?
- Qu'est-ce que Apple Vision Pro ?
- Que signifie l'informatique spatiale ?
- Signification Perception élargie
- Utilisation d'Apple Vision Pro
- Qui est intéressé par l'Apple Vision Pro ?
- L'Apple Vision Pro révolutionne-t-il donc la manière dont nous travaillons avec la réalité mixte ?
- Pas de vue réelle - tout est caméra et CGI
- Contenu 3D et réalité mixte - Utilisateur et créateur
- FAQ
Avec l'Apple Vision Pro, l'entreprise de Cupertino prévoit de lancer prochainement sur le marché des lunettes de réalité mixte qui peuvent également être utilisées sans les appareils d'Apple. Le lancement sur le marché américain est prévu pour 2024, suivi de quelques pays sélectionnés. Il faudra encore attendre un certain temps avant que les lunettes, qui devraient coûter 3 500 dollars US, ne soient disponibles en Allemagne.
Que peut faire l'Apple Vision Pro ? Et que signifient des outils comme celui-ci pour l'avenir de la CGI?
Qu'est-ce que Apple Vision Pro ?
Si tu t'attends à des lunettes pour la RA, tu te trompes. Apple a créé avec Vision ce que l'entreprise appelle elle-même un ordinateur spatial. Le Vision Pro ne se connecte pas à ton iPhone ou à ton Mac pour que tu puisses simplement voir un peu plus. Le Vision Pro est ton nouveau Mac.
Les lunettes sont équipées de leur propre système d'exploitation et traitent l'entrée de plusieurs capteurs et caméras, tout comme ce que tu fais avec ton nouvel ordinateur spatial, via une puce M2 et une puce R1. Ce que tu fais est affiché sur deux écrans OLED (un par œil) d'une résolution légèrement supérieure à 4K chacun. C'est donc assez proche de la vision naturelle. Mais que vois-tu exactement ?
Que signifie l'informatique spatiale ?
Le calcul spatial, également connu sous le nom d'informatique spatiale, est un mode de traitement de l'information qui utilise le monde physique dans lequel nous nous déplaçons et interagissons, et qui s'y intègre.
Cela implique l'utilisation de technologies telles que la réalité augmentée (AR), la réalité virtuelle (VR), la réalité mixte (MR) et l'informatique 3D afin de créer une interface entre le monde numérique et le monde physique. Dans un environnement d'informatique spatiale, un utilisateur peut par exemple naviguer dans un paysage virtuel ou interagir avec des objets virtuels comme s'ils étaient physiquement présents.
L'informatique spatiale peut avoir une multitude d'applications, notamment dans les domaines du jeu, du design, de l'architecture, de la médecine, de l'éducation, de l'ameublement, de la maison et de la vie, et bien d'autres encore. Elle permet une expérience immersive et interactive qui va bien au-delà de ce qui est possible avec les écrans bidimensionnels traditionnels. Tu trouveras une analyse approfondie de la manière dont la réalité mixte change notre perception du monde réel dans cet article de WIRED.
Importance de la perception élargie
Si les Vision Pro sont ton nouveau Mac, tu peux considérer l'espace autour de toi comme ton nouvel écran. Car ce que tu fais avec ton ordinateur ou tes lunettes, tu le vois intégré dans l'espace qui t'entoure. Tu n'as donc plus besoin d'un écran.
Et tu décides toi-même de la taille de ce que tu vois. Plusieurs écrans, des panoramas qui défilent autour de toi et remplissent toute la pièce - tout cela n'est pas un problème. Les lunettes te montrent des images d'une profondeur et d'une taille qui font exploser les murs de la pièce dans laquelle tu te trouves réellement. Tu peux néanmoins percevoir à tout moment ce qui se passe autour de toi dans l'espace réel : tu es complètement présent.
L'acoustique est également tridimensionnelle et intègre l'espace autour de toi. Les capteurs essaient de créer une carte aussi précise que possible des surfaces, des textures et des matériaux qui t'entourent.
Le son est émis par de petits haut-parleurs placés dans les branches des lunettes, juste au-dessus de tes oreilles. Le son est émis de manière ciblée, mais il est toujours adapté individuellement aux conditions de la pièce. Ainsi, tu entends également en trois dimensions et tu te trouves en principe au cœur de l'action.
Mais contrairement aux écouteurs avec Active Noise Cancellation, tu entends à tout moment ce qui se passe autour de toi. Tu peux donc continuer à parler et à participer à ce qui se passe autour de toi.
Nous t'épargnerons ici les détails techniques, tu peux toujours les trouver ailleurs sur le web - par exemple sur la page produit Apple.
Utilisation d'Apple Vision Pro
Le Vision Pro n'a pas de clavier et tu ne trouveras pas non plus de souris. Tu n'as besoin ni de l'un ni de l'autre pour travailler avec ce nouvel ordinateur. En effet, les lunettes réagissent aux mouvements de tes yeux.
Tu peux contrôler des applications rien qu'en les fixant. En pressant les doigts l'un contre l'autre, tu sélectionnes ce que tu fixes avec les yeux. Balayer, agrandir, réduire - les gestes fonctionnent parfaitement.
Tu utilises Vision Pro sans aucun problème, que tu te prélasses sur le canapé, que tu sois assis à la table de la cuisine ou que tu marches dans la pièce. Grâce aux nombreux capteurs et caméras intégrés, l'appareil sait toujours exactement ce que font tes yeux et tes mains.
Qui est intéressé par l'Apple Vision Pro ?
Avec un prix de départ de 3.500 dollars US, l'Apple Vision Pro n'est pas vraiment bon marché. Ce n'est pas un gadget agréable à côté d'un ordinateur de bureau, d'un ordinateur portable, d'un iPad et d'un iPhone. Il faut être convaincu des possibilités offertes par cet ordinateur d'un nouveau genre.
Au début, les applications se situeront plutôt dans le domaine des apps et du divertissement déjà existants. Néanmoins, Apple envisage également de travailler avec Vision Pro. Réunions vidéo, logiciels de bureautique, logiciels de conception - tout cela est disponible.
Tu mets les Vision Pro, tu appuies sur le petit bouton en haut de la monture des lunettes et tu te trouves au milieu d'une réalité mixte. Le menu apparaît immédiatement devant toi. Ce qui est remarquable, c'est que la pression physique sur le bouton ne fait pas trembler l'image. Ici, rien ne glisse ou ne bouge, l'image est parfaitement stable.
L'Apple Vision Pro révolutionne-t-il donc la manière dont nous travaillons avec la réalité mixte ?
Oui et non. Tout d'abord, tout ne semble pas très différent de d'habitude. Les apps avec leurs interfaces utilisateur ont l'air comme d'habitude, elles sont juste là devant toi dans l'espace et sont aussi grandes que tu le souhaites. Il n'y a pas d'apps qui n'existent qu'ici - jusqu'à présent.
Et bien sûr, c'est confortable de regarder un peu vers la droite et de voir les trois personnes de la réunion vidéo sur Facetime en très grand, là où se trouve le canapé, alors qu'en même temps, juste devant toi, ton écran de travail est visible et qu'un peu plus loin sur la gauche, tu peux voir les écrans de tes interlocuteurs en assez grand. C'est confortable.
Mais en quoi est-ce vraiment nouveau et inhabituel ? Il était déjà possible de le faire via plusieurs (grands) écrans ou d'autres matériels.
Pas de vue réelle - tout est caméra et CGI
Ce qui est vraiment nouveau - et c'est là que cela devient intéressant pour l'industrie de l'image de synthèse/ 3D - c'est que tu ne vois jamais vraiment l'espace autour de toi. Ou tes interlocuteurs dans Facetime. Tu ne vois jamais que des images générées.
Le Vision Pro d'Apple est certes fabriqué en verre de bonne qualité et très lourd, avec un cadre en aluminium. Mais il n'est pas fait pour voir à travers, car ce sont des écrans OLED qui se trouvent devant tes yeux. Ils ne sont tout simplement pas transparents.
Ce que tu vois, c'est l'image que les caméras des lunettes enregistrent autour de toi et te renvoient sur les écrans - en temps réel. Tes interlocuteurs en réunion ne te voient pas. Ils voient une persona que les Vision Pro ont créée de toi et qui montre tes mimiques et tes gestes. Ils ne voient pas que tu portes actuellement les Vision Pro alors que tu es en réunion vidéo avec eux - car les lunettes sont si grandes qu'ils ne pourraient même pas voir tes traits et tes expressions.
Mot-clé "immersion" : tu peux déterminer la part de ton environnement visible derrière les différentes fenêtres ouvertes grâce à la Digital Crown. Il suffit de la tourner pour élargir ou rétrécir la zone de réalité virtuelle. Comme Siri est intégré, tu peux aussi regarder le microphone et donner des ordres vocaux.
Jusqu'à présent, il n'existe que peu d'applications qui exploitent réellement les avantages de l'Apple Vision Pro. Disney, par exemple, a créé des contenus supplémentaires qui peuvent être explorés avec ce nouvel ordinateur et qui se rattachent aux produits dérivés connus. Les points forts de l'immersion sont déjà assez bien exploités ici - cela a une valeur de divertissement.
Le Vision Pro peut faire de la 3D. Les deux écrans OLED affichent la 3D telle qu'elle a probablement été conçue à l'origine : la profondeur et la netteté des contenus sont incroyables. Le Vision Pro est équipé de caméras 3D, ce qui permet de prendre des photos correspondantes.
Toutefois, ces images sont dans un certain sens statiques : si tu enregistres une scène devant toi, tu peux certes modifier ton angle de vue en inclinant légèrement la tête lorsque tu la regardes plus tard. Mais cela ne fonctionne pour l'instant que dans un cadre restreint, tu ne peux pas changer complètement ton angle de vue. Tu ne peux ni entrer dans les scènes, ni les contourner.
Contenu 3D et réalité mixte - Utilisateur et créateur
Il faut distinguer deux scénarios en matière de CGI / 3D et Vision Pro : D'une part, il y a un public incroyablement affamé et technophile qui veut être diverti et qui apprécie l'extrême brillance et la stabilité de l'image, la profondeur de champ et l'effet tridimensionnel de ces lunettes et qui souhaite du contenu pour cela.
La réalité mixte n'a pas seulement besoin d'utilisateurs - mais aussi de créateurs
En ce qui concerne l'expérience numérique de l'espace, l'Apple Vision Pro est une présence extrêmement intéressante, sans aucun doute. Il en découle tout naturellement le deuxième scénario : quelqu'un doit créer les contenus. Car il est évident que si de plus en plus de personnes s'équipent de cet ordinateur spatial, il ne s'agira pas seulement de photographier les paysages de leurs dernières vacances ou de regarder le prochain James Bond.
Apple fait déjà la promotion de l'appareil en affirmant que les contenus visuels de l'application de pleine conscience peuvent s'étendre dans toute la pièce, rendant ainsi les exercices de relaxation encore plus efficaces. Ce ne sont pas des images prises avec des caméras - ce sont des CGI, computer generated images.
Ce qui rend l'Apple Vision Pro vraiment passionnant pour les artistes 3D
Ce n'est pas le produit Apple Vision Pro qui est vraiment nouveau et intéressant, mais l'approche de la réalité mixte. L'ordinateur spatial, comme Apple appelle ses lunettes, est beaucoup plus intuitif et naturel à utiliser que tous les ordinateurs disponibles sur le marché jusqu'à présent.
La sensation naturelle du corps est moins perturbée, l'utilisation est ergonomique au sens le plus profond du terme grâce au naturel des mouvements, des interactions avec le Vision Pro. La transition entre la vie réelle et la réalité virtuelle est si naturelle qu'elle pose un défi à la CGI/3D. Et nous le relevons volontiers !
Car, et c'est le troisième scénario, il va de soi que le Vision Pro est un outil de travail tout à fait intéressant pour les personnes qui créent des images CGI/ 3D. Les différentes fonctionnalités ne révolutionnent peut-être pas le travail avec les logiciels actuellement disponibles, mais elles le rendent beaucoup plus agréable.
Lorsque les plus petits détails se déplacent de l'écran vers l'espace et peuvent être redimensionnés à n'importe quelle taille sans perdre leur netteté, il est possible de travailler de manière totalement différente. Si la coordination œil-main n'est plus nécessaire pour le travail graphique avec la souris ou le crayon, car des caméras intégrées suivent les minuscules mouvements de la pupille, cela ouvre de toutes nouvelles possibilités.
Dans cet aperçu, tu découvriras comment Adobe pose de nouveaux jalons en matière de contenus immersifs avec Mixed Reality et Substance 3D.
