Mixed Reality: BMW en Meta bieden vliegtuigen naast de auto aan

Bij mixed reality in een auto moet de vaste binnenruimte aansluiten op de bewegende passagierscel, zodat de immersie behouden blijft en er geen overgangen zijn. BMW en Meta werken samen aan een soortgelijke oplossing, die sterk werkte toen deze voor het eerst werd uitgeprobeerd in Santa Clara.

Mixed reality in de auto

Mixed reality vertegenwoordigt een combinatie van augmented en virtual reality en zou zich de komende jaren kunnen profileren als een nieuwe vorm van entertainment in de auto, aangezien smartphones, tablets of, indien nodig, een duur entertainmentsysteem op de achterbank momenteel dit veld domineren. Holoride is bijvoorbeeld één van de actieve spelers op dit gebied en is gespecialiseerd in toepassingen die speciaal zijn ontwikkeld voor gebruik in auto’s. In tegenstelling tot Holoride willen BMW en Meta niet alleen specifieke individuele toepassingen, maar de gehele mixed reality-ervaring, zoals momenteel gedemonstreerd in Quest 3 (test), naar de rijdende auto brengen.

De gezamenlijke ontwikkeling van de bijbehorende oplossing vindt plaats in Californië, waar BMW het USA Technology Office in Mountain View exploiteert, dat 25 jaar geleden speciaal voor een dergelijke samenwerking met technologiegiganten uit Silicon Valley werd opgericht. Ook voor dit project zijn we momenteel samen bezig, maar we kunnen nog niet zeggen of het tot een product voor de serie zal leiden.

De headset en de auto moeten met elkaar communiceren

Augmented en virtual reality-ervaringen vinden momenteel vooral plaats in statische omgevingen zoals de woonkamer, die precies het tegenovergestelde is van een auto. Bij mixed reality-headsets met inside-out tracking is het interieur van de auto in eerste instantie een vaste ruimte, maar de huidige headsets kunnen de beweging van de auto als geheel niet aan. naar Traagheidsmeeteenheid (IMU) Bij gebruik van de headset is er tijdens het rijden plotseling beweging te zien die niets te maken heeft met het vastgelegde interieur, waardoor de gebruikersinterface van de Quest 3, zichtbaar voor de headsetdrager, direct naar de achterkant van de kamer beweegt, zoals op de afbeelding te zien is. Zodra de auto in beweging komt. Dit exacte gedrag heeft zich voorgedaan bij opzettelijk slecht uitgeruste headsets, zoals de Meta en BMW Op de parkeerplaats voor het Levi’s Stadion in Santa Clara Toon de huidige ontwikkelingsstatus van de MR-joint venture.

Om ervoor te zorgen dat de onderdompeling niet na enkele seconden verdwijnt, moeten de auto en de headset met elkaar communiceren. Het langetermijndoel van de twee partners is daarom om gegevens van de IMU van het voertuig over te dragen naar de Quest 3 en deze te gebruiken in plaats van gegevens van de eigen IMU, bijvoorbeeld van controllers. Het huidige ontwikkelingsniveau is echter nog niet vergevorderd, dus installeert Meta in plaats daarvan vast een van de twee Quest 3-controllers in de achterste voetenruimte van de BMW iX en gebruikt ze gegevens van de IMU om de bewegingen van de auto te simuleren.

Geen diensten en geen wagenziekte

Met deze configuratie beweegt de Quest 3-gebruikersinterface niet meer bij het opstarten en blijft hij zelfs bij hoge snelheden op een vaste positie in het passagierscompartiment staan, zodat de headset net als thuis kan worden gebruikt. naar Bewegingsziekte Dit gebeurde ook niet in het specifieke scenario waarin de redacteur door de openbare straten rond Levi’s Stadion dwaalde om verschillende apps op de achterbank uit te proberen terwijl de meta-ontwikkelaars de demo begeleidden.

Breng applicaties over van Meta naar auto

Ten eerste wilde Meta duidelijk maken dat de gebruikersinterface niet langer verandert tijdens het rijden. Gebruikersinterfaces voor de huidige rit en de muziek die wordt afgespeeld, worden statisch in de ruimte voor de passagier geprojecteerd en kunnen worden bediend met de Quest 3-controller. Indien gewenst kan het panoramische glazen dak van de iX worden getransformeerd in een driedimensionaal 3D-beeld dat pulseert hemelwaarts. Wie echt in de auto wil werken, kan ook een Word-document in mixed reality bekijken dat via chat wordt verzonden met ondersteuning van virtuele assistent Jane. Nog ontspannender werd het met de meditatie-app, waarmee de gebruiker zich volledig kon onderdompelen in virtual reality om ademhalingsoefeningen te doen.

Vliegtuigspel buiten de auto

Maar de meest opvallende gebeurtenis was de wedstrijd die buiten de auto plaatsvond. Het doel was om een ​​vliegtuig door een onweersbui te laten vliegen en munten of punten te verzamelen. Als je een van de stormwolken raakt, raakt het vliegtuig beschadigd en wordt het moeilijker om terug te keren naar de muntenrij. Wat indrukwekkend was aan deze demo waren noch de graphics, noch de besturing, die alleen werd geïmplementeerd door de controller op en neer te bewegen, maar eerder het feit dat de gameplay zich volledig buiten de auto afspeelde en consequent op een stabiele manier werd gepresenteerd in relatie tot aan de gameplay. Dat wil zeggen, zelfs als hij sneller was of door bochten reed. Dit is precies hoe je je een leuke mixed reality-ervaring in de auto voorstelt.

ComputerBase ontving informatie voor dit artikel van BMW tijdens een door de fabrikant georganiseerd evenement in Mountain View. Het bedrijf droeg de kosten van aankomst en vertrek en drie nachten in het hotel. De fabrikant had geen invloed of meldingsplicht.