Hoe het Apple Vision Pro-team werken op afstand vanaf Jupiters maan Amalthea mogelijk maakte

Verenigde Staten - Ekhbary Nieuwsagentschap

Op Afstand Werken Vanaf Jupiters Maan: Hoe Apple's Vision Pro Team Virtual Reality Herdefinieerde

In een ervaring die de grenzen tussen entertainment en productiviteit vervaagt, kunnen gebruikers zich nu onderdompelen in hyperrealistische virtuele omgevingen, met name het oppervlak van Jupiters maan Amalthea. Deze schijnbaar sciencefiction-mogelijkheid is werkelijkheid geworden dankzij de Apple Vision Pro-headset en de toegewijde inspanningen van het ontwikkelingsteam. Reizen over miljoenen kilometers is niet langer een vereiste om hemelse vergezichten te ervaren; door de geavanceerde headset te dragen, kunnen gebruikers zich lichtjaren verwijderd vinden, genietend van kolossale schermen die zich uitstrekken over de virtuele horizon.

Deze digitale achtergronden staan bekend als "Environments" binnen het Apple Vision Pro-ecosysteem. Deze baanbrekende technologie maakt gebruik van ingebouwde camera's om digitale elementen naadloos te integreren in een mixed-reality wereld, waardoor gebruikers een uitzonderlijk meeslepende ervaring wordt geboden. Veel gebruikers maken gebruik van deze functie om hun digitale werkruimte uit te breiden en creëren enorme virtuele monitoren die de grenzen van hun fysieke apparaten overschrijden. Environments stellen gebruikers in staat om hun zicht op de echte wereld te vervangen door adembenemende landschappen, variërend van nationale parken zoals Joshua Tree en Yosemite tot meer exotische locaties zoals de Maan, of zelfs de manen van Jupiter.

Sinds hun lancering hebben deze virtuele omgevingen bewezen opmerkelijk meeslepend te zijn. Gebruikers kunnen inzoomen op objecten in een scène met verbazingwekkende details, en veel omgevingen zijn verrijkt met realtime audiosporen om het gevoel van aanwezigheid te versterken. De rustgevende wind die het virtuele Yosemite-uitzicht vergezelt, is voor velen een favoriet geworden, waaronder de auteur van dit rapport.

Om te begrijpen hoe dit realisme-niveau is bereikt, presenteert dit artikel inzichten van Yuri Imoto, Apple Vision Pro Product Marketing, en Matt Dessero, Human Interface Designer bij Apple. Ze werpen licht op het complexe proces om deze omgevingen tot leven te brengen, met een bijzondere focus op de unieke, interactieve omgeving van Jupiters maan Amalthea.

Wetenschappelijke Samenwerking voor Astronomisch Realisme

De Jupiter-omgeving onderscheidt zich van andere virtuele instellingen als de eerste volledig interactieve omgeving van de Vision Pro. Het team dat verantwoordelijk is voor de ontwikkeling ervan streefde naar maximale authenticiteit, ondanks dat gebruikers geen referentiepunt uit de echte wereld hadden voor een verre maan zoals Amalthea. Om dit te bereiken, nam het Apple-team contact op met NASA's Jet Propulsion Laboratory (JPL) om een diepgaand begrip te krijgen van hoe het zou zijn om op het oppervlak van dit hemellichaam te werken of te zitten.

Matt Dessero, Human Interface Designer bij Apple, verklaarde: "We spraken met Dr. Cynthia Phillips van het Jet Propulsion Laboratory, en zij en het team van wetenschappers daar hebben ons echt geholpen de samenstelling van de planeet of de maan waarop we ons bevinden te begrijpen. Aanvankelijk begonnen we met wat pre-visualisaties en pasten we enkele basistexturen toe die leken op onze eigen maan, die een kern heeft. Ze wezen er snel op dat Amalthea eigenlijk geen kern heeft; het is een conglomeraat van rotsen, gesteente, die zijn samengeklonterd door de zwaartekracht van Jupiter, bij elkaar gehouden door ijs."

Dit ijs omringt, volgens Dessero's beschrijving, de voeten van de gebruiker in de virtuele omgeving van Amalthea. Dynamische schaduwen vegen over het oppervlak en benadrukken complexe texturen en vormen die van dichtbij kunnen worden onderzocht. Het detail is zo fijn en boeiend dat het gebruikers zelfs kan afleiden van de gigantische planeet die ervoor draait.

De precisie van deze details wordt nog indrukwekkender gezien het beperkte referentiemateriaal dat het Apple-team over Amalthea had. "Er zijn enkele kraterdetails, maar het is in wezen slechts een kleine, wazige vlek. Het is geraakt, maar het is behoorlijk klein. Dus hebben we JPL geconsulteerd en uiteindelijk een ruwe textuur voor het hele oppervlak gemaakt", legt Dessero uit. Het zwart-witbeeld dat ze produceerden lijkt op een "wazige aardappel".

Dessero verduidelijkt: "Het is ongelooflijk klein; de diameter is ongeveer 100 mijl, 90-100 mijl. Om dat in perspectief te plaatsen, zou de diameter van Jupiter 11 aardes kunnen bevatten. Dus, Amalthea is behoorlijk klein in het grote geheel."

Locatiekeuze en Technische Uitdagingen

Ondanks de schaarste aan referentiemateriaal, biedt Amalthea's uitkijkpunt een ideaal beeld van Jupiter. Het is dichtbij genoeg gepositioneerd om de planeet de horizon te laten domineren, maar niet zo dichtbij dat essentiële details worden verhuld. De vraag rijst: wat is het nut van het zien van Jupiter als je de Grote Rode Vlek niet kunt zien?

Dessero legt uit: "Vanaf Jupiters maan Io was het te ver weg. Vanaf Amalthea voelde het uitzicht precies goed. Toen probeerden we Adrastea, die buitensporig groot aanvoelde; we konden de Grote Rode Vlek niet zien. We wilden er echt een beter zicht op hebben. En we wilden niet valsspelen; we stonden erop om op een van de daadwerkelijke manen te zijn, niet alleen om te zweven en de maan zelf te verplaatsen. Dus, Amalthea was onze keuze."

Zodra het uitkijkpunt was vastgesteld, moest Apple de scène echt interactief maken. Jupiter draait sneller dan enige andere planeet in het zonnestelsel en voltooit een dag in iets minder dan 10 uur. Vision Pro-gebruikers kunnen echter het verstrijken van de tijd aanpassen, waardoor het sneller of langzamer gaat. Al deze beweging vereist aanzienlijke rekenkracht, wat naast de artistieke presentatie een aanzienlijke technische uitdaging vormt.

Dessero merkt op: "We hebben veel van onze texturen vooraf gebakken, zodat we volledig konden vertrouwen op de rekenkracht voor, weet je, al die dynamische schaduwen, sub-surface scattering en animaties die plaatsvinden." De verbeterde kracht van de M5-chip beheert deze overgangen gemakkelijk.

Het Samenvoegen van Kunst en Technologie

Hoewel de Jupiter-omgeving momenteel de meest geavanceerde en indrukwekkende omgeving vertegenwoordigt, neigen gebruikers vaak naar meer traditionele instellingen. Voor aardse omgevingen gebruikte het team slimme technische strategieën om realistische locaties vast te leggen, terwijl ze tegelijkertijd creatieve vrijheden namen om ze aangenamer te maken als virtuele achtergronden. Het creatieproces omvat het vastleggen van 360-graden beelden en het uitvoeren van uitgebreide 3D-scans om een raster voor het landschap te creëren.

Dessero legt uit: "We maken panorama's, die het grootste deel van onze textuur vormen voor verre regio's waar we op eenvoudigere vlakken kunnen projecteren. Vervolgens moeten objecten die dichtbij zijn, worden gerenderd met behulp van een 3D-object of CG-benadering voor textuurcreatie. We gebruiken vervolgens shaders voor effecten zoals reflectie, schaduw en ga zo maar door." Als gevolg hiervan verlenen de objecten van dichtbij een tastbaar gevoel van realisme aan de scènes.

Echter, overmatige aandacht voor detail kan soms leiden tot het "uncanny valley"-effect. In de maanomgeving, bijvoorbeeld, stelde het gebrek aan atmosferische nevel, waar we op aarde aan gewend zijn, een unieke uitdaging voor schaalvergroting. Een visuele aanwijzing die ons brein normaal gesproken vertelt: "dat object is erg ver weg en ook erg groot", ontbreekt bij afwezigheid van een atmosfeer. Dit kan ervoor zorgen dat een 7.000 voet hoge maanberg eruitziet als een 400 voet hoge heuvel.

Hoewel onze ogen de schaal in deze virtuele omgevingen misschien niet altijd nauwkeurig waarnemen, doen de digitale objecten die door Vision Pro zijn gemaakt dat zeker. Ik kreeg de kans om nog een film te bekijken op een virtueel scherm op de top van een berg. Licht van het "scherm" sijpelde op de wolken eronder en creëerde een verrassend overtuigend meeslepend effect.

Tijdens mijn gesprek met Dessero maakte hij onomwonden duidelijk dat Apple het gehele ontwikkelingsproces van Environments beschouwt als een zorgvuldige mix van pure kunst en technische uitvoering. Het vastleggen van complexe LiDAR-netten van een omgeving stelt kunstenaars in staat om een versie van een locatie te creëren die zowel realistisch als geïdealiseerd is.

Conclusie: De Toekomst van Virtuele Omgevingen

Na enkele weken met de vernieuwde Apple Vision Pro is de Jupiter-omgeving mijn meest gebruikte digitale bestemming geworden. Ik houd de simulatiesnelheid ingesteld op de langzaamste van de drie beschikbare instellingen, waardoor de omgeving geleidelijk verandert terwijl ik werk of inhoud bekijk. Soms ga ik gewoon zitten en doe alsof ik Dr. Manhattan uit Watchmen ben, die de aarde met succes heeft verlaten om alleen te leven in een desolate, rotsachtige wildernis in de ruimte. Ik weet niet zeker of dit was wat Apple in gedachten had bij het inbrengen van al deze details in de Environments, maar ik ben blij dat ze het deden.

Stan Horaczek is de executive gear editor bij Popular Science. Hij leidt een team van gadget-geobsedeerde schrijvers en redacteuren die zich toeleggen op het vinden en presenteren van de nieuwste, beste en meest innovatieve gadgets op de markt en daarbuiten.

Ekhbary Nieuwsagentschap