Microsofts MRTouch for blandet virkelighet konverterer ethvert overflate til en virtuell berøringsskjerm

• 2019

Det vil ikke være galt å si at Microsoft er en pioner innen domenet Mixed Reality, da selskapet har opprettet en hel plattform basert på Windows OS for å utvikle ny bruksscenarier for MR-teknologi. OEMer som HP og Acer har allerede utgitt MR-hodetelefoner på flere markeder, men Microsofts MR-prosjekt, HoloLens, skal ikke gjøres tilgjengelig kommersielt.

Til tross for begrenset tilgjengelighet gjør Microsofts forskerteam noe virkelig bemerkelsesverdig arbeid, og det siste eksempelet på deres fremgang er MR Touch, som konverterer overflaten til en virtuell berøringsskjerm. Den futuristiske teknologien forvandler enhver plan overflate rundt brukerne som bærer HoloLens-headsettet, til en berøringsskjerm, som de kan samhandle på flere måter, som å surfe på nettet eller vise 3D-objekter blant andre oppgaver.

MRTouch har full multi-touch-støtte og registrerer innganger ved å beregne dybde- og nærhetsdata ved kontinuerlig å spore brukerens miljø og håndbevis, med en suksessfrekvens på 97, 5% og romlig nøyaktighet som utgjør 5, 4mm av gjennomsnittlig feil i avstanden. Brukere kan starte en app ved å dra en finger over alle overflater for å lage en virtuell berøringsskjerm, og velge hvilken som helst app fra et grensesnitt som ser ut som standard Windows 10-layout.

Når det gjelder omfanget av oppgaver som man kan utføre, synes det som om brukerne kan bruke HoleLens-headsettet som en datautstyr for daglige oppgaver ved hjelp av MRTouch, komplett med støtte for bevegelser som panorering og zooming. Den virtuelle berøringsskjermen generert av MRTouch kan til og med skape realistisk 3D-innhold og støtter også luftbevegelser for å skape interaksjon i et 3D-rom, for eksempel å lage et blokkarrangement i Minecraft med presis justering gjennom berøringsinnganger.

Videoen viser en testbruker bare å dra fingeren for å lage en todimensjonal blokk, åpne fingrene for å konvertere blokken til en tredimensjonal modell og justere høyden ved å løfte hendene oppover eller nedover (ikke i motsetning til Minority Report eller Tony Stark's Jarvis AI). Videre kan brukerne også flytte et in-air-grensesnitt til en plan overflate og samhandle med den som en vanlig berøringsskjerm, men det er ingen detaljer når MRTouch-teknologien vil se en bredere utgave.