Move.ai permite la detección de movimiento por IA sin problemas en la producción de videojuegos


Move.ai puede usar inteligencia artificial para capturar una representación en 3D de un actor en un proceso conocido como captura de movimiento. Sin embargo, no requiere actores con trajes de lycra con muchas bolas blancas. Y permite a las empresas de juegos realizar capturas de movimiento de forma remota durante la pandemia.

Este es un avance tecnológico importante ya que los problemas con los sistemas de captura de movimiento han provocado paros de producción tanto para los cineastas como para las empresas de videojuegos. Move.ai espera solucionar este problema con la captura de movimiento "sin marcadores" que puede reducir el costo y el esfuerzo de hacer el trabajo.

La tecnología proviene de una empresa de Londres que comenzó a capturar imágenes de atletas y convertirlas en objetos animados digitalmente. Pero la pandemia obstaculizó este negocio con el cierre de eventos deportivos. Afortunadamente, los juegos necesitan un mayor realismo para que los jugadores estén completamente inmersos y comprometidos en una realidad alternativa, y eso significa que necesitan detección de movimiento.

“Definitivamente trabajamos en un espacio donde la creatividad y la tecnología se unen”, dice el CEO de Move.ai. Mark Endemano dijo en una entrevista con GamesBeat. “Nuestro viaje comenzó más en el campo deportivo. Pero siempre quisimos meternos en los videojuegos. Un evento en realidad creó un catalizador para que nos metiéramos en los juegos y ese fue el COVID-19. Con los deportes en vivo como un desafío, rápidamente dimos la vuelta y aceleramos nuestro movimiento hacia los videojuegos. “

Capturing People

Arriba: Cuatro estrellas del fútbol de EE. UU. Haciendo captura de movimiento para el juego FIFA 16.

Crédito de la foto: EA [19659008] Move.ai toma un video 2D de una persona grabado en un iPhone o teléfono Samsung Galaxy y lo convierte en un avatar 3D. Lo que es realmente emocionante, dijo Endemano, es que la forma tradicional en que los desarrolladores crean gráficos atractivos es a través del trabajo cuidadoso de un artista humano o mediante un intrincado sistema de captura de movimiento.

Antes de la pandemia, los principales desarrolladores de juegos utilizaban estudios de grabación de movimiento con muchas cámaras que capturan el movimiento de los actores en un escenario y ensamblan estas imágenes en representaciones en 3D. Las cámaras podían ver marcas blancas en los cuerpos. El trabajo era duro para los actores, y los escenarios y sistemas de captura de movimiento eran caros y tenían que estar rodeados de pantallas verdes para asegurarse de que los bordes de las personas fueran fácilmente distinguibles.

Arriba: La selección femenina de Alemania en FIFA 16.

Crédito de la foto: EA

Pero funcionó. Las representaciones de los actores fueron capturadas en movimientos fluidos, lo que hace que sea mucho más fácil para los animadores crear personajes del juego basados ​​en las imágenes capturadas. Estos personajes se movían con fluidez e hicieron que los juegos parecieran mucho más realistas para los jugadores. La captura de movimiento es fundamental para hacernos creer que los personajes de las pantallas de películas o juegos son reales.

El efecto de la pandemia

Sin embargo, durante la pandemia, muchos de estos estudios se cerraron porque los estudios funcionan desde casa. Ya no podría realizar la detección de movimiento de forma segura. Aquí es donde entra en juego Move.ai. Se desarrolló la llamada “captura de movimiento sin marcadores”, con la cual se puede capturar el movimiento natural de una persona con video y crear una representación con mucho menos equipo.

Además, no hubo necesidad de los monos con las bolas blancas. Eso significa que los actores pudieron moverse mejor y sin cansarse. No tienes total libertad de movimiento con un traje tradicional de captura corporal, y eso no es bueno cuando intentas simular una pelea o una escena de artes marciales.

Quizás esté pensando en la tecnología de cámara Kinect de Microsoft de la consola de juegos Xbox 360 utilizada para juegos como Dance Central. Pero Kinect no recopiló tantos datos, no tenía la mejor IA y no tenía suficiente potencia de procesamiento en el hardware. Move.ai es como una versión adulta de Kinect. Move.ai puede recopilar 100.000 puntos de datos de una persona, en comparación con los 10 o 15 puntos de los marcadores. Y Move.ai dice que su método cuesta menos que la captura de movimiento tradicional.

Arriba: Move.ai puede capturar deportes o videojuegos.

Crédito de la foto: Move.ai

“Creemos que podemos democratizar esta capacidad y ponerla en manos de todos, desde personas influyentes que crean contenido generado por el usuario hasta desarrolladores de juegos triple A que crean grandes juegos desarrollar ”, dijo Endemano.

Move.ai utiliza software de visión por computadora e inteligencia artificial para examinar el video de una cámara estándar para crear representaciones animadas. El actor es libre y desinhibido, lo que conduce a una mejor actuación. Por ejemplo, pueden usar cualquier calzado que deseen para que su paso no se vea afectado por zapatos especiales.

"Ciertamente es más fácil proporcionar esto a animadores y desarrolladores", dijo Endemano. “Capturamos el movimiento y lo proyectamos en un personaje”.

Gran parte de este proceso ahora está automatizado para que la salida pueda ir directamente a un motor de juego o software de arte 3D como Maya. "El resultado es que obtienes resultados de mayor calidad más rápido", dijo Endemano. "No necesitas un estudio en absoluto. Puedes hacer esto en un parque".

Technical Origins

La tecnología fue desarrollada por Tino Millar, el fundador y director de tecnología de Move.ai, durante su estadía en Imperial College en Londres estaba trabajando en tecnología y consiguió varias patentes, tenía unos meses para realizar su doctorado, pero decidió dejarlo para trabajar en la empresa pensando que sería divertido hacer una cámara. para rastrear sus movimientos para rastrear ejercicios.

"Ya no estamos hablando de Tetris y Space Invaders", dijo Millar. "Los juegos requieren la inmersión total de personajes desde todas las direcciones y ángulos. Esto presenta muchos desafíos. Por ejemplo, si juegas Assassin's Creed o God of War, necesitas muchas animaciones del personaje desde muchos ángulos diferentes ”.

  Detección de movimiento para el Figura digital Lucy los lobos en las paredes.

Arriba: Detección de movimiento para la figura digital Lucy the Wolves en las paredes.

Crédito de la foto: Fable Studios

Añadió: "Mostramos esto a los directores de animación y dijeron que era alucinante". menos de $ 2 millones. Pero la empresa está empezando a conseguir clientes.

El desafío para Move.ai es hacerse un hueco en los grandes estudios de juegos que pueden o no trabajar con la misma tecnología. Pero Move.ai ve otro trabajo posible. La tecnología podría funcionar para la animación volumétrica y la publicidad virtual. Los directores de películas y juegos también podrían usar la tecnología para visualizar previamente una escena y un guión gráfico porque los datos no son tan costosos de usar.

"Pasé muchos años en la universidad y entrenamos un modelo de aprendizaje automático para comprender las verdaderas formas de las personas en 3D", dijo Millar. "Reunimos una gran biblioteca de formas 3D con personas de escaneos. Luego les dimos diferentes perspectivas de las cámaras y luego los capacitamos para que pudieran caminar desde allí". Queríamos que la cámara pudiera recrear la malla 3D de la persona. "

" Como seres humanos podemos mirar a nuestro alrededor y si solo cierras un ojo puedes ver que los objetos están en 3D, aunque técnicamente es solo con un ojo. Técnicamente, necesitas los dos ojos o cámaras para entender algo en 3D. Pero debido a nuestros cerebros, hemos visto tantos objetos en 3D que ahora podemos cerrar un ojo y determinar con tanta eficacia la forma de las cosas en 3D. “

Hay rivales que Move.ai debe vencer para conseguir clientes de videojuegos. Afortunadamente, hay muchos de estos clientes.

Endemano y Millar están entusiasmados con el potencial de la tecnología en manos de personas que no son programadores ni artistas. Los influencers podrían usar esta tecnología y desarrollar juegos porque simplifica el proceso.

"La gente podría hacer las cosas más extraordinarias en sus propias cuatro paredes", dijo Millar. "El poder de eso no debe subestimarse".

Deja una respuesta

Tu dirección de correo electrónico no será publicada.