Comment l'équipe Apple Vision Pro a permis le travail à distance depuis la lune de Jupiter, Amalthea

États-Unis - Agence de presse Ekhbary

Travailler à distance depuis la lune de Jupiter : Comment l'équipe d'Apple Vision Pro a réinventé la réalité virtuelle

Dans une expérience qui brouille les frontières entre le divertissement et la productivité, les utilisateurs peuvent désormais s'immerger dans des environnements virtuels hyper-réalistes, notamment la surface de la lune de Jupiter, Amalthea. Cette capacité, qui relève de la science-fiction, est devenue une réalité grâce au casque Apple Vision Pro et aux efforts dévoués de son équipe de développement. Voyager des millions de kilomètres n'est plus une condition préalable pour découvrir des vues célestes ; en enfilant le casque de pointe, les utilisateurs peuvent se retrouver à des années-lumière, profitant d'écrans colossaux qui s'étendent à l'horizon virtuel.

Ces décors numériques sont connus sous le nom d'"Environments" au sein de l'écosystème Apple Vision Pro. Cette technologie révolutionnaire utilise des caméras intégrées pour intégrer de manière transparente des éléments numériques dans un monde de réalité mixte, offrant aux utilisateurs une expérience exceptionnellement immersive. De nombreux utilisateurs exploitent cette fonctionnalité pour étendre leur espace de travail numérique, créant d'énormes moniteurs virtuels qui dépassent les limites de leurs appareils physiques. Les Environments permettent aux utilisateurs de remplacer leur vision du monde réel par des paysages à couper le souffle, allant des parcs nationaux comme Joshua Tree et Yosemite à des lieux plus exotiques tels que la Lune, ou même les lunes de Jupiter.

Depuis leur lancement, ces environnements virtuels se sont révélés remarquablement immersifs. Les utilisateurs peuvent zoomer sur les objets d'une scène avec des détails étonnants, et de nombreux environnements sont enrichis de pistes audio en temps réel pour amplifier le sentiment de présence. Le vent apaisant qui accompagne la vue virtuelle de Yosemite est devenu un favori pour beaucoup, y compris l'auteur de ce rapport.

Pour comprendre comment ce niveau de réalisme a été atteint, cet article présente les réflexions de Yuri Imoto, responsable du marketing produit pour Apple Vision Pro, et de Matt Dessero, concepteur d'interfaces humaines chez Apple. Ils éclairent le processus complexe d'animation de ces environnements, avec un accent particulier sur l'environnement interactif unique de la lune de Jupiter, Amalthea.

Collaboration scientifique pour un réalisme astronomique

L'environnement de Jupiter se distingue des autres décors virtuels en tant que premier environnement entièrement interactif du Vision Pro. L'équipe responsable de son développement visait une authenticité maximale, malgré le manque de référence du monde réel pour les utilisateurs concernant une lune lointaine comme Amalthea. Pour y parvenir, l'équipe d'Apple a contacté le Jet Propulsion Laboratory (JPL) de la NASA afin de mieux comprendre à quoi pourrait ressembler le travail ou la présence à la surface de ce corps céleste.

Matt Dessero, concepteur d'interfaces humaines chez Apple, a déclaré : "Nous avons parlé avec le Dr Cynthia Phillips du Jet Propulsion Laboratory, et elle ainsi que l'équipe de scientifiques nous ont vraiment aidés à comprendre la composition de la planète ou de la lune sur laquelle nous nous trouvons. Initialement, nous avons commencé avec une pré-visualisation, et nous avons appliqué des textures de base qui ressemblaient à notre propre lune, qui possède un noyau. Ils ont rapidement souligné qu'Amalthea n'a en fait pas de noyau ; c'est un conglomérat de roches, une roche de base, qui se sont coalescées sous l'effet de la gravité de Jupiter, maintenues ensemble par de la glace."

Cette glace, selon la description de Dessero, entoure les pieds de l'utilisateur dans l'environnement virtuel d'Amalthea. Des ombres dynamiques balayent la surface, mettant en évidence des textures et des formes complexes qui peuvent être examinées de près. Le détail est si fin et engageant qu'il pourrait même distraire les utilisateurs de la planète géante qui tourne devant eux.

La précision de ces détails devient encore plus impressionnante compte tenu du matériel de référence limité dont disposait l'équipe d'Apple sur Amalthea. "Il y a quelques détails de cratères, mais c'est essentiellement une petite tache floue. Elle a été impactée, mais elle est assez petite. Nous avons donc consulté le JPL et avons fini par créer une texture grossière pour toute la surface", explique Dessero. L'image en noir et blanc qu'ils ont produite ressemble à une "pomme de terre floue".

Dessero précise : "Elle est incroyablement petite ; son diamètre est d'environ 100 miles, 90 à 100 miles. Pour mettre cela en perspective, le diamètre de Jupiter pourrait contenir 11 Terres. Amalthea est donc assez petite dans l'ensemble."

Sélection du site et défis techniques

Malgré la rareté du matériel de référence, le point de vue d'Amalthea offre une vue idéale de Jupiter. Elle est positionnée suffisamment près pour que la planète domine l'horizon, mais pas trop près pour que les détails essentiels soient masqués. La question se pose : quel est l'intérêt de voir Jupiter si l'on ne peut pas observer la Grande Tache Rouge ?

Dessero explique : "Depuis Io, la lune de Jupiter, c'était trop distant. Depuis Amalthea, la vue semblait juste parfaite. Nous avons ensuite essayé Adrastea, qui semblait excessivement grande – nous ne pouvions pas voir la Grande Tache Rouge. Nous voulions vraiment une meilleure vue. Et nous ne voulions pas tricher ; nous insistions pour être sur l'une des lunes réelles, pas simplement flotter et déplacer la lune elle-même. Ainsi, Amalthea a été notre choix."

Une fois le point de vue établi, Apple devait rendre la scène véritablement interactive. Jupiter tourne plus vite que toute autre planète du système solaire, accomplissant une journée en un peu moins de 10 heures. Cependant, les utilisateurs de Vision Pro peuvent ajuster le passage du temps, le rendant plus rapide ou plus lent. Tout ce mouvement nécessite une puissance de calcul considérable, présentant un défi technique important parallèlement à la présentation artistique.

Dessero note : "Nous avons pré-rendu bon nombre de nos textures afin de pouvoir nous fier uniquement à la puissance de calcul pour, vous savez, toutes ces ombres dynamiques, la diffusion sous-surfacique et les animations qui se produisent." La puissance accrue de la puce M5 gère facilement ces transitions.

Fusion de l'art et de la technologie

Alors que l'environnement de Jupiter représente le décor le plus avancé et le plus impressionnant actuellement disponible, les utilisateurs se tournent souvent vers des décors plus traditionnels. Pour les environnements terrestres, l'équipe a employé des stratégies techniques intelligentes pour capturer des lieux réalistes tout en prenant des libertés créatives pour améliorer leur attrait en tant qu'arrière-plans virtuels. Le processus de création implique la capture d'images à 360 degrés et la réalisation de scans 3D complets pour générer un maillage du paysage.

Dessero explique : "Nous réalisons des panoramas, qui constituent la majeure partie de notre texture pour les régions éloignées où nous pouvons projeter sur des plans plus simples. Ensuite, pour les objets proches, ils doivent être rendus à l'aide d'une approche d'objet 3D ou CG pour la création de textures. Nous utilisons ensuite des shaders pour des effets tels que la réflexion, l'ombrage, etc." Par conséquent, les objets proches confèrent un sentiment tangible de réalisme aux scènes.

Cependant, une attention excessive aux détails peut parfois entraîner l'effet de "vallée étrange" (uncanny valley). Dans l'environnement lunaire, par exemple, l'absence de brume atmosphérique, commune sur Terre, a posé un défi unique en matière de mise à l'échelle. Un indice visuel qui informe généralement notre cerveau sur la distance et la taille – la perspective atmosphérique – est absent. Cela peut faire qu'une montagne lunaire de 7 000 pieds ressemble à une colline de 400 pieds.

Bien que nos yeux ne perçoivent pas toujours avec précision l'échelle dans ces paramètres virtuels, les objets numériques créés par Vision Pro le font certainement. J'ai eu l'occasion de regarder un autre film sur un écran virtuel positionné au sommet d'une montagne. La lumière émanant de "l'écran" projetait des lueurs réalistes sur les nuages en dessous, créant un effet immersif étonnamment convaincant.

Lors de ma conversation avec Dessero, il a clairement indiqué qu'Apple considérait l'ensemble du processus de développement des environnements comme une fusion délicate entre l'art pur et l'exécution technique. La capture de grilles LiDAR complexes d'un environnement permet aux artistes de créer une version d'un lieu à la fois réaliste et idéalisée.

Conclusion : L'avenir des environnements virtuels

Après plusieurs semaines avec l'Apple Vision Pro remanié, l'environnement de Jupiter est devenu ma destination numérique la plus fréquentée. Je règle la vitesse de simulation sur le paramètre le plus lent des trois disponibles, permettant aux environs de changer progressivement pendant que je travaille ou que je consomme des médias. Parfois, je m'assieds simplement et j'imagine être le Dr Manhattan de Watchmen, ayant abandonné la Terre avec succès pour habiter un paysage désolé et rocheux dans l'espace. Bien que ce n'ait peut-être pas été l'utilisation prévue par Apple pour ces environnements détaillés, je suis reconnaissant du niveau d'immersion qu'ils offrent.

Stan Horaczek est le rédacteur exécutif des équipements technologiques chez Popular Science. Il supervise une équipe de rédacteurs et d'éditeurs passionnés par la technologie, dédiés à la recherche et à la présentation des gadgets les plus récents, les meilleurs et les plus innovants sur le marché et au-delà.

Agence de presse Ekhbary