¿Puede la IA reemplazar a los actores?El principio de funcionamiento de la tecnología dual digital es el siguiente

Dentro de la esfera, el mundo se reduce a una esfera de luz blanca intermitente. Más allá del esqueleto metálico de la esfera se encuentra la oscuridad. Imagina que estás atado a una silla dentro de este artilugio. Las voces en la oscuridad sugieren expresiones: cómo posicionar la boca y las cejas, la escena ante la que reaccionar, las frases que decir y las emociones que encarnar. La voz también te dirá ocasionalmente que no te preocupes y te advertirá que se avecinan más destellos.

«No creo que tuviera miedo, pero era un espacio muy abrumador», dijo un actor, que pidió a Noticias-Hoy que no revelara su nombre por razones de privacidad. Estaba describiendo su experiencia usando «La Esfera», como llama a su sala de fotogrametría, para capturar su imagen mientras trabajaba en un videojuego a gran escala en 2022. [a magnetic resonance imaging machine]», dijo. «Es realmente ciencia ficción. «La experiencia del actor es parte de un proceso de escaneo que permite a los estudios de producción de medios tomar fotografías de los actores en diferentes posiciones y crear avatares digitales móviles y maleables que luego se pueden animar para crear escenas realistas. Realizar casi cualquier acción o acción en una secuencia de video. .

Los avances en inteligencia artificial ahora hacen que sea más fácil crear estos dobles digitales, incluso sin requerir un entrenamiento intenso en una esfera. Algunos actores temen que en el futuro los estudios los obliguen a renunciar a sus retratos y sus dobles digitales les quiten sus trabajos. Este es uno de los factores que llevó a los miembros del sindicato SAG-AFTRA (Screen Actors Guild-American Federation of Television and Radio Artists) a hacer huelga. «Los artistas intérpretes o ejecutantes deben proteger nuestras imágenes y actuaciones para evitar que la tecnología de inteligencia artificial reemplace la actuación humana», dijo el sindicato en un comunicado difundido días después de anunciar la huelga a mediados de julio.

Aunque la sustitución por inteligencia artificial es una posibilidad inquietante, los dobles digitales que se ven en las producciones mediáticas actuales todavía dependen de artistas humanos y artistas de efectos especiales. Así es como funciona la tecnología y cómo la inteligencia artificial puede transformar los procesos establecidos.

Cómo funciona la tecnología de gemelos digitales

Durante los últimos 25 años, se ha vuelto cada vez más común que las producciones mediáticas de gran presupuesto creen dobles digitales de al menos parte de los rostros y cuerpos de los artistas. Es casi seguro que esta tecnología entrará en juego en cualquier película, programa de televisión o videojuego que involucre efectos digitales extensos, escenas de acción elaboradas o representaciones de personajes de múltiples edades por parte de actores. «Se ha convertido en una especie de estándar de la industria», dijo Chris MacLean, director de efectos visuales de la Apple TV Programming Foundation. *

Una sala de fotogrametría es un área rodeada por cientos de cámaras, a veces dispuestas en forma esférica, a veces en una sala cuadrada. Las cámaras capturan miles de imágenes 2D de rostros humanos superpuestas intencionalmente en alta resolución. Si el papel del actor implica hablar o expresar emociones, se necesitarán muchas imágenes de diferentes movimientos faciales. Por lo tanto, los actores protagonistas deben ser analizados más exhaustivamente que los actores secundarios o de fondo. Asimismo, se utilizan dispositivos más grandes para escanear el cuerpo.

Utilizando estos datos, los artistas de efectos visuales (VFX) transforman modelos de dos dimensiones a tres dimensiones. La superposición de fotografías es clave. Con base en las coordenadas de la cámara y esas superposiciones excesivas, las imágenes se mapean y se pliegan entre sí, un proceso similar al origami digital. Luego, los artistas pueden ensamblar el avatar 3D resultante en un «esqueleto» virtual y crearlo siguiendo directamente la actuación de captura de movimiento del actor en el mundo real, o combinando esa actuación con una secuencia de acciones generada por computadora en animación. Luego, los personajes animados se pueden colocar en el paisaje digital y mantener conversaciones; técnicamente, se puede usar un escaneo de una persona para crear secuencias de video realistas de ella haciendo y diciendo cosas que el actor nunca ha hecho o dicho.

Los artistas de efectos especiales también pueden aplicar interpretaciones digitales de actores a avatares que no se parecen en nada a los humanos. Por ejemplo, el citado actor de videojuegos dijo que hacía muecas en la esfera y grababa sus líneas en un estudio de grabación. También realizó muchas escenas en un estudio separado con otros artistas para capturar el movimiento, un proceso similar a la fotogrametría pero diseñado para registrar los movimientos del cuerpo. Sin embargo, cuando los jugadores tengan en sus manos el producto final, no verán al actor en la pantalla. En cambio, su doble digital fue modificado para que pareciera un villano con una apariencia específica. El personaje animado final refleja el trabajo del actor y las características del personaje del videojuego.

Las producciones cinematográficas y televisivas han utilizado este proceso durante décadas, aunque históricamente ha sido costoso y laborioso. A pesar de las dificultades, los dobles digitales son comunes. Los equipos de producción suelen utilizarlos para realizar pequeños ajustes que implican diálogo y acción. La tecnología también se utiliza para ediciones a mayor escala, como transformar y replicar 100 actores de fondo en una multitud digital de miles. Pero es más fácil lograr tal hazaña de manera convincente si el metraje original se acerca al resultado final deseado. Por ejemplo, dijo McLean, los actores de fondo escaneados vestidos con trajes que imitaban la ropa europea del siglo XIX eran difíciles de editar en un futuro distópico en el que sus dobles digitales llevaban trajes espaciales. «No creo que los estudios tengan tanta paciencia», añadió.

Sin embargo, la inteligencia artificial generativa (la tecnología de aprendizaje automático detrás de ChatGPT) está comenzando a hacer que cada aspecto del proceso de duplicación digital sea más rápido y sencillo.

intervención de inteligencia artificial

McLean señaló que algunas empresas de efectos visuales ya están utilizando inteligencia artificial generativa para acelerar el proceso de modificación de la apariencia de los dobles digitales. Eso hizo que fuera más fácil reducir la edad de actores famosos en películas como En busca del arca perdida y Dial of Destiny, que incluían flashbacks de una versión más joven de Harrison Ford, que ahora tiene 81 años. Vladimir Galat, director técnico de la empresa de fotogrametría móvil Scan Truck, dijo que la inteligencia artificial también puede resultar útil para el reemplazo de rostros, donde la imagen del actor se superpone a un doble (esencialmente aprobado (intercambio de rostro profundo).

Garratt dijo que los avances en inteligencia artificial han hecho que algunos escaneos de fotogrametría sean innecesarios: los modelos pueden entrenarse con fotografías y secuencias existentes, incluso las de personas que han muerto. Digital Domain, la productora de efectos visuales involucrada en la producción de «Avengers: Endgame», dijo que también es posible crear actuaciones digitales falsas a través de personajes históricos. «Esta es una tecnología muy nueva, pero es una parte cada vez mayor de nuestro negocio», afirmó Hanno Basse, director de tecnología de Digital Domain.

Hasta ahora, los seres humanos vivos todavía participan en las representaciones de los muertos. Un actor real representa una escena, luego los artistas de efectos especiales reemplazan sus rostros con los de personajes históricos. «Creemos que los matices de la actuación de un actor, combinados con nuestro conjunto de herramientas de inteligencia artificial y aprendizaje automático, son fundamentales para lograr efectos realistas que atraigan al público y crucen el valle inquietante», dijo Bass, refiriéndose a la sensación extraña que causa cuando algo parece humano, pero no es del todo humano.

Preocupaciones por el reemplazo de robots

El ingeniero informático Jeong Joon “JJ” Park dice que hay una diferencia entre modificar el rendimiento de un doble digital y reemplazar completamente el rendimiento de una persona con inteligencia artificial. Actualmente estudia visión por computadora y gráficos en la Universidad de Stanford y comenzará a trabajar en la Universidad de Michigan este otoño. . Park señala que el valle inquietante es amplio y que actualmente no existe ningún modelo de inteligencia artificial generativa que pueda producir escenas completas, realistas y en movimiento desde cero. La tecnología aún no es suficiente. Para lograrlo, «es necesario que haya un gran salto adelante en la inteligencia que estamos desarrollando», afirmó. (Las imágenes generadas por IA pueden ser difíciles de distinguir de las imágenes reales, pero es mucho más fácil crear imágenes fijas realistas que crear películas que representen el espacio 3D).

Aun así, persiste la amenaza de un mal uso de las imágenes de los actores. Si el rostro de una persona se puede intercambiar fácilmente con el de otra, ¿qué impide a los cineastas incluir a Tom Cruise en cada toma de cada película de acción? ¿Qué impediría que un estudio sustituyera a 100 actores de fondo por un solo actor y utilizara la inteligencia artificial para crear la ilusión de muchas personas? La abogada de derechos de autor y marcas Eleanor Luckman dijo que un mosaico de leyes estatales significa que en la mayoría de los lugares las personas tienen derechos de propiedad legal sobre sus imágenes. Pero señaló que existen amplias excepciones para fines artísticos y expresivos, y que el cine podría fácilmente caer en esta categoría. El abogado de medios y tecnología Jonathan Blavin explica que independientemente de lo que diga la ley, una persona puede firmar legalmente un contrato transfiriendo sus derechos de imagen a una productora. Cuando se trata de proteger la imagen digital de una persona, todo se reduce a los detalles del contrato, una situación que SAG-AFTRA conoce muy bien.

El actor que interpretó a un villano de un videojuego el año pasado se sintió cómodo con el escaneo de su personaje. «La empresa para la que trabajo es bastante honesta», afirmó. Pero en el futuro, es posible que no pueda llegar a un acuerdo tan rápido. “Las capacidades de la inteligencia artificial en la captura facial y lo que estamos haciendo desde [prestrike negotiations], muy aterrador», dijo. El actor ama los videojuegos, le entusiasmaba protagonizar uno y espera volver a hacerlo. Pero primero, dijo, «verificaré los documentos y consultaré con mi agencia (y posiblemente con un abogado)».

*Nota del editor (25/7/23): Esta oración fue editada después de la publicación para aclarar la posición de Chris MacLean sobre la Apple TV Programming Foundation.