Wat is Mixed Reality?

Er zijn 3 “realities”, Virtual Reality, Augmented Reality en Mixed Reality. Deze laatste is van de 3 wel de meest onbekende.
Het is op zich opvallend dat dit de meest onbekende “digitale realiteit” is, met name omdat Mixed Reality (of MR) wel de beste kaarten heeft voor een snelle mainstream adoptie. Inmiddels bereikt een steeds groter wordende groep Techjournalisten, “zieners” en “Visionairs” consensus over het feit dat Mixed Reality uiteindelijk de techniek zal zijn waar “de mensheid” verder mee zal gaan.

Dit zal zo ver gaan dat Mixed Reality headsets de huidige smartphone langzaam naar de achtergrond zullen gaan dringen en dit het digitale middel wordt waar we de komende decennia nog meer verslingerd aan zullen zijn dan aan de Smartphone vandaag. Dit alles zal niet dit jaar gebeuren, en ook niet volgend jaar, we zijn nu in het tijdperk van Virtual Reality en in toenemende mate Augmented Reality. Mixed Reality is echter de uiteindelijke uitkomst.

Wat zijn de verschillen tussen Virtual-, Augmented en Mixed Reality?

Hoewel de termen te pas en te onpas door elkaar gebruikt worden is er wel een (relatief) duidelijke splitsing aan te brengen, waar ik graag zou willen opmerken dat er een grijs gebied bestaat tussen Augmented-, en Mixed Reality omdat een aantal zaken elkaar overlappen.

Ik geef een korte definitie van (wat ik denk) de verschillende technieken:

  • Virtual Reality: is de techniek waarbij een gebruiker afgesloten van de buitenwereld (Immersed) ervaringen heeft in Virtuele werelden, deze werelden zijn opgebouwd uit computer gegenereerd of daadwerkelijk film/fotomateriaal.
  • Augmented Reality: is de techniek waarbij de gebruiker de echte wereld om zich heen ziet, de techniek verrijkt deze wereld door het toevoegen van digitale elementen (de AR Overlay). Die digitale elementen kunnen bestaan uit graphics, video, geluid etc. De digitale elementen worden weergegeven aan de hand van Markers, ofwel punten die herkend worden door het AR device zodat het weet waar de elementen weergegeven moeten worden.
  • Mixed Reality: is de techniek waarbij de volledige omgeving inclusief alles wat er zich in die omgeving bevindt in kaart wordt gebracht. De techniek projecteert digitale elementen in deze omgeving, die digitale elementen zijn in staat om te interacteren met hun omgeving maar ook met elkaar. De weergegeven elementen zijn van zo een hoge kwaliteit dat deze vrijwel niet meer van echt zijn te onderscheiden, de grens tussen werkelijkheid en Virtueel vervaagt: Mixed Reality.

Hoe werkt Mixed Reality?

Als we een sleutelwoord zouden moeten geven voor Mixed Reality zou dit wel: Flexibiliteit zijn. Mixed Reality combineert de beste aspecten uit zowel Virtual – als Augmented Reality.

Mixed Reality laat de gebruiker de “echte wereld” zien (net als in AR) maar projecteert hier geloofwaardige Virtuele objecten in (net als in VR). Waar Augmented Reality voornamelijk vertrouwt op Markers om te bepalen waar het digitale elementen laat zien, gebruikt Mixed Reality de gegevens die het uit zijn omgeving krijgt. Het verankert deze virtuele objecten vervolgens aan een punt in de “echte wereld” waardoor het mogelijk wordt om ze ook te beschouwen als zijnde echt.

Om dit te bereiken gebruikt een Mixed Reality headset een combinatie van camera’s en andere sensoren (bijv infrarood). Een MR headset “scant” continu de omgeving waar jij je bevindt, het creëert aan de hand hiervan een “digitale kaart” waarin alles is vastgelegd. De digitale kaart bevat niet alleen informatie omtrent de ruimte (muren, plafond etc) maar bevat ook nauwkeurige informatie omtrent de objecten die er in de ruimte aanwezig zijn. (meubilair,  personen etc.).

Zo wordt het in Mixed Reality mogelijk om bijvoorbeeld je woonkamer om te toveren in, ja wat je maar wilt eigenlijk. Mixed Reality projecteert zijn digitale inhoud waarbij het rekening houdt met zijn omgeving. Dit wil dus zeggen dat je bijvoorbeeld games kan spelen waarbij jou tegenstanders zich kunnen verstoppen achter een bankstel, en als jij schiet de kogel (of laser of whatever) ook daadwerkelijk inslaat in jouw bankstel.

 

Mixed Reality Headsets

Een Mixed Reality headset is in de basis hetzelfde als een Augmented Reality bril, toch zijn er een paar belangrijke verschillen.

Net als bij Augmented Reality is een Mixed Reality headset voorzien van transparante lenzen zodat je de “echte wereld” om je heen gewoon ziet. De digitale elementen worden aan de binnenkant van de glazen weergegeven en mixt naadloos met je daadwerkelijke omgeving (daar komt ook de term Mixed Reality of kortweg MR genoemd)

Verder is de bril voorzien van Camera’s en diverse andere sensoren (Infrarood, Gyroscope, magnometer, accelerometer) zodat de bril “weet” waar fysieke objecten zich bevinden.

De Mixed Reality bril gebruikt zijn arsenaal aan sensoren om een nauwkeurige digitale “kaart” van zijn omgeving te maken, inclusief alle objecten die zich hierin bevinden. Doordat de headset een nauwkeurig beeld heeft van zijn omgeving wordt het mogelijk om virtuele objecten te laten “interacteren” met fysieke maar ook met elkaar onderling.

De bekendste voorbeelden van Mixed Reality headsets zijn, tot nu Microsoft Hololens en Magic Leap.

Magic Leap is de hoogst gewaardeerde Startup ooit en het bedrijf hult zich, tot nu, in mysterie…. (lees hier alle details en het laatste nieuws over dit bedrijf), een bedrijf wat binnenkort een Mixed Reality bril zal onthullen welke, naar verwachting ook voor de “gewone consument” binnen handbereik zal zijn.

Ook Micrsoft werkt al langere tijd aan een een Mixed Reality bril; van de zogenaamde Hololens zijn inmiddels DK’s (developer kits) beschikbaar, de verwachting is echter dat deze bril niet op korte termijn voor de gemiddelde consument beschikbaar zal zijn.