California programadores que trabajan en un sistema para el reconocimiento de las emociones Oculus Rift

Hao Li, profesor asistente en la Universidad del Sur de California, publicó su trabajo para dibujar abajo realismo adicional al mundo virtual. Él руководит desarrollo de , por el que Oculus Rift, pantalla montada en la cabeza, puede en tiempo real считывать expresiones faciales por .

Desde la antigüedad los principales medios informáticos de transmitir emociones eran sonrisas. Luego vino cámaras web y chats de vídeo, se puede ver libremente compañero. Pero lo que si nebhodimo transmitir expresiones faciales en la realidad virtual? O reconocer las emociones de utilizar esta información para dibujar los avatares del juego?

Por supuesto, el sistema de reconocimiento facial para video hay . Eso es sólo esta tarea es mucho más complicado cuando se utiliza virtuales gafas de realidad - como el Oculus Rift. La unidad masiva cierra 2/3 personas - en el mejor de los casos, la cámara ver la boca del usuario. ¿Qué hacer?

La respuesta se encuentra Hao Li - programador, investigador y modelo , quien nació en Alemania y tiene unas raíces taiwanesas. Con un equipo de personas de ideas afines, y bajo los auspicios estrictos de la red social Facebook (Oculus compró el proyecto en 2014), han desarrollado un sistema de reconocimiento de expresiones faciales para los usuarios Oculus Rift.



La parte inferior de la cara la cámara reconoce. El prototipo de cámara utilizando Intel REALSENSE 3D, pegajosa sobre un soporte masivo por los puntos. Quizás el dispositivo final se puede disponer en una miniatura puntos inferiores de la cámara. Trabajar los músculos faciales de la parte superior de la cara reconociendo ocho medidores de tensión (medidores de deformación), construido en el perímetro de la junta en los puntos blandos. A juzgar por el video, el sistema funciona con bastante precisión.

Con este sistema, podemos transmitir emociones en su avatar en salas de chat virtuales y juegos, o para tener en cuenta las expresiones faciales, por ejemplo, cuando se habla con el NPC. El sistema complementa el nuevo detalle realista realidad virtual.



Por supuesto, hay desventajas en la técnica anterior. También se ha mencionado inconveniente montar la cámara (que se resuelve), mientras que existe la necesidad de una inicial "calibrar" un usuario específico - tendrá unos emoticonos sistema para datos reales correlacionados persona específica Scorch con sus plantillas. Pero esta fase de los desarrolladores esperanza de eliminar en el futuro, cuando se adquiera una buena base "muecas" de diferentes personas.

Otra característica - los requisitos del sistema. Mismo Oculus Rift требователен para limar , y este sistema, por supuesto. Para el funcionamiento normal a una velocidad de 30 FPS tendrá Core i7-4820K, 32 GB de RAM y un
GTX 980.
El sistema no es probable que aparezca junto con la primera copia de los vasos, que, después de un largo desarrollo, estará disponible en начале junto años.

Fuente: geektimes.ru/post/250834/