Microsoft mette in mostra le nuove demo di HoloLens alla conferenza di Build

L'imminente auricolare HoloLens di Microsoft è il primo dispositivo di realtà aumentata di fascia alta che è stato mostrato al pubblico. Sfortunatamente, Microsoft è stata così a denti stretti che non ne sappiamo davvero molto.

Oggi, alla Microsoft Developer Development Conference di San Francisco, abbiamo avuto un'altra sbalorditiva anteprima della tecnologia. La demo stessa è brillante ma non molto informativa. Tuttavia, possiamo individuare alcuni dettagli importanti leggendo tra le righe. In questo caso, ciò che Microsoft ha scelto di non mostrare è più informativo di quello che hanno fatto.

La demo

Molti degli ingegneri di HoloLens sono saliti sul palco per mostrare alcune delle nuove demo che hanno sviluppato per l'hardware. Una demo si svolge come ricreazione dell'appartamento deprimamente scarso di un ingegnere e copre le pareti e il pavimento con app e giocattoli virtuali. Un altro porta in alcuni medici per mostrare un modello di un corpo umano, e poi lo smonta. Infine, un robot kit sviluppa una parte superiore del corpo espressiva e virtuale e apre un ampio pannello di stato, consentendone la regolazione in tempo reale.

Il diavolo, i dettagli

Finora, così impressionante - ma molte delle mie domande iniziali sugli HoloLens Cinque domande sul "Progetto HoloLens" di Microsoft Cinque domande sul "Progetto HoloLens" di Microsoft La nuova cuffia Augmented Reality di Microsoft è molto eccitante - ma possono risolvere i problemi fondamentali di AR ? Leggi altro rimangono senza risposta. Quindi guardiamo un po 'più da vicino.

Occlusione

La demo ti sembra un po 'messa in scena? Guarda attentamente i movimenti della videocamera. Non è solo il solito imbarazzo del trade-show. Guarda di nuovo la demo e cerca i momenti in cui un essere umano passa davanti a un oggetto virtuale.

Questo è chiamato occlusione, ed è un problema difficile nella realtà aumentata. Per rendere correttamente questo fenomeno, gli HoloLens devono mappare il mondo in modo rapido e preciso per tagliare la silhouette della persona dall'immagine virtuale. Altrimenti, avrai un conflitto di profondità: la tua visione stereo ti dirà che l'oggetto virtuale è dietro la persona, ma verrà visualizzato sopra di essi. Come abbiamo imparato dalla realtà virtuale, questi tipi di conflitti sono sconvolgenti e distruggono l'illusione che gli oggetti con cui stai interagendo siano parti tangibili del mondo.

La demo fa di tutto per impedirlo. È possibile vedere l'operatore della telecamera reagire quando una delle persone sul palco si muove verso un oggetto virtuale, muovendosi per impedirle di sovrapporsi. L'intera demo è elaborata con coreografia. Uscire dalla sedia nella prima demo fa sì che il ragazzo sul palco passi davanti a un robot virtuale - e, convenientemente, la telecamera è puntata altrove esattamente in quel momento.

Lo rovinano solo poche volte. Durante la demo del robot, il robot passa brevemente davanti ad alcuni punti virtuali sul pavimento, e uno dei relatori li segue. In entrambi i casi, c'è un conflitto di profondità: continui a vedere i punti virtuali attraverso gli oggetti reali, implicando che Microsoft non ha ancora una soluzione a questo problema.

Possiamo vedere più prove di ciò nella stessa demo, quando viene visualizzata una visualizzazione della mappa dell'ambiente dell'headset. Se lo si inquadra fotogramma per fotogramma e lo si osserva da vicino, è possibile vedere che la mappa non è corretta in diversi modi: la tabella si trova su una piattaforma sollevata, che diventa un rigonfiamento vago nella mappa. Il robot, allo stesso modo, è visibile nella mappa, ma solo come un piccolo grumo. I bordi della scrivania mancano. Probabilmente si può incolpare questi problemi sulla risoluzione limitata del sensore di profondità Kinect all'interno dell'auricolare. In ogni caso, qui non c'è abbastanza precisione per occludere correttamente gli oggetti virtuali.

Siamo chiari qui: questo potrebbe essere un ostacolo. Lo scopo di HoloLens è quello di combinare senza problemi oggetti reali e virtuali in modo convincente. L'occlusione è una parte necessaria dell'illusione. L'occlusione è un'arma così potente che aggiungere una sola linea bianca a un video può creare un potente effetto 3D da solo.

Microsoft è chiaramente consapevole di questo. Mostrano l'occlusione nei loro materiali promozionali. Eppure, dai loro demo, non sembra che possano effettivamente farlo. Se Microsoft non è in grado di risolvere questo problema, non ha un prodotto. Gli utenti non vivono in demo elaborate con coreografie all'interno di case vuote. Non tollereranno errori di rendering costanti e che infrangono le immersioni. Sono onestamente piuttosto stupito dal fatto che più della stampa tecnica non stia parlando di questo problema. Sono molto curioso se Microsoft abbia qualche piano per risolvere questo problema.

Interfaccia utente

Ogni volta che guardo un video che mostra l'interfaccia utente di HoloLens, la frase che mi passa per la testa è stata “Lo faremo davvero ancora??”

Con ogni nuova piattaforma di elaborazione, sia PC che smartphone, passiamo attraverso un ciclo di cattiva interfaccia utente prima di capirlo. Il problema è che le cattive UI sono cattive esattamente nello stesso modo, e sono cattive nel modo in cui l'interfaccia utente di HoloLens è cattiva. Per una volta, vorrei poter riconoscere il modello e saltare in avanti per la parte buona. Ecco cosa HoloLens (e ogni nuova piattaforma) ha sbagliato:

• In primo luogo, cercano di ricreare i vecchi paradigmi, invece di crearne di nuovi. Pensa ai vecchi smartphone Treo che sono stati costruiti attorno a una tastiera fisica e uno stilo che emulga il mouse. Gli HoloLens sono esattamente gli stessi, usando la testa per emulare un mouse e il dito per fare clic. Diamine, a un certo punto l'ingegnere “trascina” una finestra chiudendola alla sua testa, qualcosa che la guida Oculus VR Best Practices mette in guardia esplicitamente contro. HoloLens non è un PC e il tentativo di utilizzare un'interfaccia utente PC non funzionerà.
• In secondo luogo, vengono avvolti nelle parti lucide dell'interfaccia e creano ornati, inutili lanugine. Ti ricordi Clippy? Microsoft Bob? La finta pelle sulla vecchia app per appunti iOS? Questa roba è inutile confusione visiva. Il cane virtuale e la vasca per i pesci e il robot sono esattamente la stessa cosa. Quante volte dobbiamo fare questo prima di renderci conto che il minimalismo è l'unica buona idea?

Mentre ci siamo, il “ologrammi” loro stessi sono un pasticcio visivamente. Non riescono a decidere se sono riquadri puliti o sciocchi, blob di cartone animato. Gli elementi dell'interfaccia utente sono troppo grandi, e richiedono gesti estesi da utilizzare, fino a includere anche il camminare fisicamente, il che è un cattivo design per molte ragioni.

Se sembra che io sia arrabbiato per questo, è perché le interfacce utente coinvolgenti alla fine diventeranno davvero, molto belle un giorno. L'interfaccia utente HoloLens che è stata mostrata finora è un casino completo, ed è un peccato. Una buona interfaccia utente è la differenza tra Treo e iPhone - tra un mainframe IBM e il PC originale mouse e tastiera. È la differenza tra un giocattolo per nerd e un'innovazione che cambia il mondo.

Fattore di forma

C'è un importante pezzo di buone notizie. Microsoft ha portato “centinaia” dei dispositivi HoloLens allo spettacolo e li stanno mostrando ai partecipanti. L'ultima volta che Microsoft ha fatto delle dimostrazioni, le persone erano legate a cuffie ingombranti cablate. Le cuffie utilizzate sul palco erano oggetti di scena che potevano mostrare solo un'immagine in bianco e nero a bassa risoluzione. Tuttavia, il presentatore afferma chiaramente che le cuffie sono “piacciono solo quelli che hai visto sul palco oggi.” In altre parole, Microsoft ha miniaturizzato con successo l'hardware HoloLens per adattarsi a un fattore di forma portatile, che è una grande notizia.

Ecco l'esperienza di uno sviluppatore con il nuovo hardware:

“Sono andato 'sul cantiere' e hanno sovrapposto i progetti sul muro. Poi ho potuto vedere come sarebbe stata una porta e ho notato che c'era un raggio nel modo. Abbiamo spostato la porta e poi aggiunto uno strato con l'impianto elettrico e idraulico, e ho visto che un tubo era ora in mezzo. Ho guardato l'aria e ho fatto clic sul tubo e ho lasciato una nota vocale perché l'idraulico potesse spostare il tubo.

Poi sono tornato nel ruolo dell'idraulico e ho recuperato il mio biglietto (era appeso lì), ho guardato fisso e cliccato e ho sentito la mia voce registrata.

Indossare il dispositivo ha bisogno di un po 'di tempo per abituarsi. Non era molto ben regolato e mi premeva un po 'sul naso. Ma penso di poterlo aggiustare meglio nel tempo.

L'area olografica è meno estesa di quanto pensassi. È un rettangolo davanti ai tuoi occhi ma se hai una buona visione laterale (come ho), è un po 'inquietante perché l'ologramma verrà ritagliato quando muovi la testa.

Tutto sommato è estremamente impressionante e non vedo l'ora di svilupparlo.”

Mentre lo scrittore nota che il dispositivo ha ancora un campo visivo basso, sembra impressionato dall'hardware complessivo, il che è un segnale promettente. Alla fine, AR diventerà un sostituto più potente e flessibile per la realtà virtuale - che è già una tecnologia sorprendente Perché la tecnologia della realtà virtuale ti farà impazzire tra 5 anni Perché la tecnologia della realtà virtuale ti farà esplodere la tua mente tra 5 anni Il futuro della realtà virtuale include tracciamento di testa, occhi ed espressioni, tocco simulato e molto altro. Queste fantastiche tecnologie saranno disponibili per te in 5 anni o meno. Leggi di più . La grande domanda è: quanto siamo lontani?

Supporto per gli sviluppatori

Anche se non è stato menzionato nel video dell'annuncio, Microsoft ha anche annunciato che, attraverso la loro partnership con Unity, ci sarà anche il pieno supporto per HoloLens in Unity, uno degli strumenti più comuni usati per lo sviluppo di giochi indie. Il supporto includerà la possibilità di eseguire il rendering attraverso gli HoloLens e di ottenere input dal dispositivo in vari modi. Sia Unity Free che Unity Pro avranno il supporto gratuito di HoloLens. Mentre l'integrazione non è ancora completa, Microsoft sta già dando corsi brevi alla conferenza di Build utilizzando le integrazioni del prototipo Unity, per dare agli sviluppatori un primo sguardo su quale sarà la codifica per AR.

Questa è una mossa gradita ma non sorprendente. Qualsiasi nuova piattaforma vive o muore per la qualità del suo contenuto di lancio e HoloLens non farà eccezione. Inoltre, Microsoft è sempre stata impegnata nelle relazioni con gli sviluppatori.

Prototipo di febbre

Gli HoloLens si stanno lentamente avvicinando alla realtà commerciale. Mantengo profonde riserve su alcuni dei limiti dell'hardware, ma il dispositivo è innegabilmente interessante. 8 Real-World Uses per Microsoft HoloLens 8 Real-World Uses per Microsoft HoloLens Microsoft HoloLens è bello, ma per cosa lo userete? Corriamo le possibilità più eccitanti. Leggi di più, e qualcosa del genere sarà un giorno molto utile. Sei eccitato per HoloLens? Hai avuto la possibilità di provarne uno alla conferenza? Voglio solo una ciotola di pesce virtuale? Fateci sapere nei commenti!

Scopri di più su: Microsoft, Realtà virtuale, Windows 10.