Content
El model de realitat virtual ha desaparegut certament durant els últims dos anys a causa de la combinació de maquinari car, de manera que el rendiment i la malaltia del moviment i la falta de contingut de l'usuari. Actualment, la indústria es troba en una situació de pollastre i ou, on la manca de consumidors impedeix la inversió en contingut alt. Es necessitarà un maquinari VR més potent i rendible per a les masses per trencar el punt mort.
Arm busca superar alguns d'aquests obstacles tecnològics amb el seu primer processador de visualització (DPU) dissenyat específicament per a VR: el Mali-D77. En poques paraules, el Mali-D77 descarrega tasques habituals de processament de VR de la GPU, alliberant recursos per a taxes de trama més elevades alhora que contribueix a reduir la malaltia pel moviment.
Dins del Braç Mali-D77
Bona part del Mali-D77 es basa en el Mali-D71 del 2017 per a telèfons intel·ligents emblemàtics i altres aplicacions de gamma alta. Disposa del mateix decodificador de compressió, escalat de capes, suport HDR i unitats de gestió del color. Tot i això, el nou disseny s'ha optimitzat per suportar resolucions 3K a 120fps, amb suport per a resolucions 4K fins a 90fps.
Els principals canvis es produeixen en dues noves unitats d’acceleració de maquinari per a aplicacions de VR. El Mali-D77 és compatible amb la correcció de la lent i el temps asíncron en maquinari, en lloc d'executar aquests algoritmes a la GPU. Arm calcula que això pot alliberar al voltant del 15 per cent dels recursos de la GPU, cosa que es pot orientar a augmentar els percentatges. Si traslladem aquesta càrrega a la DPU, també estalviem un 40 per cent d'ample de banda i 180mW de potència per capa de VR. Agradable.
La correcció de les lents és necessària als auriculars VR per compensar la curvatura de la llum de l'auricular. S’aplica la distorsió de barril a cada trama representada per tal de compensar l’efecte de distorsió Pincushion de les lents. Penseu en això com una sobrecompensació o una "distorsió inversa" perquè la distorsió de la lent acabi mostrant la imatge correcta. Tradicionalment, això es fa a la GPU, agafant cicles i temps addicionals. El Mali-D77 ho fa tot a la DPU.
A més, el Mali-D77 realitza una correcció d’aberracions cromàtiques mitjançant un mètode de distorsió inversa similar. Amb aquesta aplicació, els colors de la imatge es mostraran correctament a tota la lent, inclòs als racons on es pot produir una distorsió de la separació de colors.
Què és Asincrònic Timewarp?
La correcció dels objectius és més aviat autoexplicativa, però hi ha una mica més el temps asincrònic. Aquí, Arm utilitza el processador de visualització per girar, inclinar i deformar les imatges per compensar els moviments del usuari mentre mitiga qualsevol GPU o una altra latència de canonades de visualització.
Amb el maquinari de generació actual, el seguiment del moviment dels eixos X, Y, Z s'actualitza en sincronització amb la GPU, perquè la GPU ha de fer el canvi en vista cada vegada que us moveu. Amb Asynchronous Timewarp, les dues ja no s’actualitzen juntes. Podeu moure el cap entre les actualitzacions de fotogrames de la GPU i el Mali-D77 pot deformar el marc actual per adaptar-se al moviment del cap.
Aquest és un efecte subtil, ja que només dura una fracció de segon entre els fotogrames representats i no elimina la necessitat de renderitzar la velocitat de fotograma ràpida. Tanmateix, augmenta molt la fluïdesa i la suavitat del moviment i el moviment, ja que les actualitzacions es poden produir fins i tot amb més freqüència que la freqüència de fotograma de la GPU. La desconnexió entre el cos en moviment i veure una actualització visual és la principal causa de malaltia en moviment en VR, per la qual cosa el Mali-D77 pot ajudar molt en aquest aspecte.
Les dades del moviment dels eixos X, Y, Z s’alimenten directament al Mali-D77 des de la CPU, passant per complet l’etapa de la GPU. Aquesta és una manera molt diferent de fer les coses i, per tant, caldrà que els desenvolupadors utilitzin un nou conjunt d’eines i tècniques de desenvolupament. Sens dubte aquest és el major obstacle amb el D77. Afortunadament, els enginyers de Arm treballen estretament amb iniciatives com OpenXR, de manera que podríem veure un anunci de l'API sobre el suport dels desenvolupadors simplificat en el futur.
En general, el Arm Mali-D77 és una progressió intel·ligent i lògica de la idea de computació heterogènia per ajudar a resoldre alguns dels principals problemes de maquinari de la realitat virtual. Hi ha encara altres obstacles en els segments de comunicació, seguiment i cost de la tecnologia sense fils de VR per resoldre abans que es pugui reconsiderar l'adopció principal, però el Mali-D77 ajuda a produir alguns problemes del rendiment.
