Planurile mixte de realitate Microsoft depășesc cu mult hololenii

Când Microsoft a făcut anunțul surpriză al unui nou produs de realitate augmentată (AR) la un eveniment Windows 10 la începutul anului 2015, căștile Microsoft HoloLens nu au fost primul lucru pe care audiența l-a văzut. Când a dezvăluit lumea nouă tehnologie, Alex Kipman - creatorul atât al controlerului de mișcare Microsoft Kinect, cât și al HoloLens - a arătat în schimb un logo pentru Windows Holographic, platforma software aliniată Windows 10 care stă la baza ambițiilor AR ale Microsoft.

Mai mult de doi ani mai târziu, software-ul care alimentează ecosistemul în creștere al dispozitivului AR Microsoft este încă cel mai bun indicator al locului în care compania intenționează să-și ia viitorul „realitate mixtă” (MR). Are acum un alt nume; Microsoft a re-marcat Windows Holographic în Windows Mixed Reality, dar obiectivul nu s-a schimbat. Microsoft dorește să construiască o rețea interoperabilă de căști AR, VR și realitate mixtă de la diverși producători, toate vorbind între ele și rulând Windows 10 Universal Apps.

Există trei prong-uri la această abordare: hardware-ul Microsoft pentru prima parte (HoloLens), stiva software în evoluție găzduită în cadrul platformei Windows Mixed Reality și parteneriate hardware terțe cu Microsoft, Acer, Asus, Dell, HP și Lenovo pentru a construi 299 USD Căști cu realitate mixtă care rulează Windows 10. Primul dintre acestea, căștile Acer Windows Mixed Reality Development Edition, este deja livrat către dezvoltatori.

Ce este realitatea mixtă?

Microsoft nu este singura companie AR care a început să folosească termenul realitate mixtă pentru a diferenția între diferite puncte din spectrul AR / VR. Pe de o parte, aveți ochelari monoculari pe care îi vedeți de la companii precum Vuzix și AR bazat pe smartphone popularizat de aplicații precum Pokemon Go.

Pe de altă parte, există experiențele binoculare mai imersive montate pe cap (afișează în ambii ochi cu un câmp vizual de 360 ​​de grade) a dispozitivelor precum HoloLens, ochelarii ODG R-9 sau încă nevăzutul Magic Leap. În termeni simplificați excesiv, vă puteți gândi la AR ca la adăugarea de informații suprapuse sau obiecte virtuale, într-un mod bidimensional, pe deasupra celor din fața dvs.

Dar continuul în care există aceste tipuri de tehnologii este mai profund decât atât. Dacă vă imaginați un spectru cu lumea fizică pe o parte și realitatea virtuală pe cealaltă, ar arăta astfel:

Lumea fizică -> Realitate augmentată -> Realitate mixtă <- Virtualitate augmentată <- Realitate virtuală

(Nu vă faceți prea multe griji în ceea ce privește virtualitatea mărită. Încă nu suntem încă).

În acest moment, industria este confuză cu o terminologie confuză, dar separarea tuturor jargonului este importantă nu numai în înțelegerea ecosistemului, ci și în identificarea tuturor punctelor în care Microsoft intenționează să se conecteze la el. Dacă viziunea gigantului tehnologic va trece, software-ul de realitate mixtă Microsoft poate rula pe căști cuprinse între 299 și 3.000 de dolari, încorporat în experiențe ale consumatorilor și întreprinderilor în gaming, comerț electronic, design industrial și fabricație, vizualizări interactive de date ale întreprinderii, medicamente și dincolo.

Cum construiți un sistem de operare cu realitate mixtă

În timpul unui briefing recent cu Microsoft, PCMag a avut ocazia să verifice pe scurt noua cască parteneră Acer. De asemenea, am obținut o defalcare a stivei de software pentru Windows Mixed Reality, incluzând câteva informații despre modul în care Microsoft lucrează cu OEM-urile pentru a construi setul de cască de 299 USD și ce este actualizarea recentă a Windows 10 Creators Update pentru aplicații Windows cu realitate mixtă pe o serie de dispozitive de calcul diferite.

Platforma Windows Mixed Reality se descompune în mai multe straturi diferite. În partea de sus a stivei, aveți afișajul montat pe cap (HMD) cu șase grade de libertate (6DoF), reprezentând nivelul de mișcare tridimensională și urmărirea poziției acceptate. HoloLens folosește ceea ce Microsoft numește 6DoF în interior, adică urmărirea poziției care combină datele de la mai mulți senzori și camere de intrare cu algoritmi pentru a menține experiența lină.

Pentru context, seturile cu cască VR netethered care utilizează un display pentru smartphone inclusiv Samsung Gear VR și Google Daydream View acceptă în prezent 3DoF, uneori cunoscut sub numele de pitch-yaw-roll. Căștile VR cu tetă, precum Oculus Rift și HTC Vive au urmărirea poziției 6DoF.

Windows 10 Creators Update include suport pentru controlul mișcării 6DoF în Acer și alte seturi de cască OEM viitoare. Ediția de dezvoltare a realității mixte Acer Windows include două camere de urmărire a poziției față în față și afișaje duale, în comparație cu cele patru camere pe care le veți găsi pe cele mai scumpe HoloLens (cele două camere HoloLens adăugate sunt utilizate pentru cartografierea spațială), dar toate cele cinci partenere căștile vor suporta 6DoF. O actualizare care va veni la sfârșitul acestui an va adăuga suport pentru cipurile grafice integrate în seturile cu cască de realitate mixtă, deși hardware-ul va avea nevoie de un cip Intel recent ^de generație ^a 7- ^a pentru a obține actualizarea.

Următoarele straturi din Windows Mixed Reality stack gestionează intrarea, middleware-ul și interfețele de programare a aplicațiilor (API) pentru realitatea mixtă și percepția spațială. Stratul de intrare prelucrează toate datele vizuale, giroscopice, vocale și de intrare spațiale pe care un dispozitiv AR / VR le colectează la un moment dat. Aceasta ar putea cuprinde date din surse, inclusiv sisteme de coordonare, privirea și direcționalitatea, gesturile, intrarea vocală, sunetul spațial și maparea spațială.

Straturile de tip middleware și API sunt esențiale pentru a înțelege modul în care platforma începe să se conecteze la restul ecosistemului software AR / VR. Documentația dezvoltatorului Windows Mixed Reality include deja instrucțiuni pentru crearea de aplicații holografice folosind platforme populare, inclusiv Unity (motor de dezvoltare multiplă platformă), Vuforia (platforma de dezvoltare AR) și un protocol de middleware pentru construirea aplicațiilor MR folosind rulajul Microsoft DirectX.

Platforma nu este deschisă, în sine - trebuie să te joci după regulile universale ale aplicației Windows Microsoft, dar Microsoft oferă o serie de opțiuni pentru conectarea la stiva de software MR. Un exemplu în acest sens sunt căștile Intel Project Alloy VR, așteptate la sfârșitul acestui an, care rulează o versiune a software-ului Windows Mixed Reality.

Straturile finale ale stivei adaugă o interfață de utilizator personalizată (UI) Microsoft numește „shell”, împreună cu servicii cloud, cum ar fi autentificarea și sincronizarea Xbox Live și mesageria colaborativă prin servicii precum Skype. În Acer Windows Mixed Reality Development Edition am arătat o scurtă privire, „shell-ul” a fost în esență un sistem de operare prevăzut ca camerele unei case.

Utilizatorul poate apoi să se teleporteze în camere diferite și să lanseze diverse aplicații afișate sub formă de icoane plutitoare sau care ocupă o țiglă de pe un perete. Acestea pot fi aplicații simple, cum ar fi Fotografii, Filme și TV, un Microsoft Edge sau chiar un meniu Windows 10 Start complet, pe care îl puteți naviga în cadrul experienței, care a funcționat cu un controler Xbox. Desigur, există, de asemenea, câteva funcții amuzante de modelare interactivă 3D, la fel ca în cazul HoloLens. Exemple de demonstrații au variat de la elefanți și tigri care se plimbau până la un astronaut flutur pe care îl poți plasa în cameră și o aplicație care te lansează într-un sistem solar 3D. Acestea sunt doar câteva exemple, având în vedere că setul cu cască OEM poate rula orice aplicație Windows Universal. Din perspectivă software, Microsoft vede toate aceste dispozitive ca pe computere Windows 10 pentru capul tău.

Compania poate lansa, la un moment dat, o specificație hardware standard cu realitate mixtă, însă Microsoft se concentrează în acest moment pe stiva de software și co-inginerie valul viitor de seturi de căști partenere. Dacă aruncați o privire mai atentă la lansarea aniversară a Windows 10 (și HoloLens Commercial Suite în cadrul acesteia), puteți vedea, de asemenea, caracteristicile software pe care Microsoft le-a adăugat sub capotă, pentru a face HoloLens, care se confruntă cu întreprinderea, să fie mai atractiv pentru desfășurarea businessului mainstream.

HoloLens Commercial Suite susține setul de caracteristici de bază ale HoloLens Development Edition, permițând întreprinderilor să trateze setul cu cască cu realitate mixtă ca doar un alt dispozitiv din rețeaua IT corporativă. Microsoft a lansat HoloLens Commercial Suite în august anul trecut pentru un preț de 5.000 de dolari, iar pentru acea sumă suplimentară de 2 K $ obțineți funcții, inclusiv gestionarea mai profundă a dispozitivelor mobile (MDM) cu Microsoft Intune împreună cu Kiosk Mode, care va lansa HoloLens direct într-o aplicație specifică experiență în scopul unei demo-uri în magazin într-un mediu de vânzare cu amănuntul.

Suita comercială este dotată, de asemenea, cu criptarea unității Microsoft BitLocker Drive și acces la protecția rețelei virtuale private (VPN), care acum este mai importantă ca niciodată. Hardware-ul strălucitor va primi întotdeauna mai multă atenție, mai ales că Asus, Dell, HP și Lenovo își vor lansa setul cu cască partener în următoarele luni. Însă pentru cea mai clară imagine a strategiei de realitate mixtă a Microsoft este orientată cu atenția asupra software-ului.