Las bandas virtuales de K-pop impulsadas por IA están aumentando en Corea del Sur

cnn
—

En el vídeo musical de su último sencillo «DTDTGMGN», los miembros de la boy band surcoreana Eternity bailan al ritmo de la música pop en una habitación rosa neón decorada con uniformes escolares y carteles de celebridades. Los impresionantes movimientos de cámara y los rápidos cambios de escena son típicos del género K-pop que se ha convertido en un fenómeno global en los últimos años.

“Abrázame fuerte, apóyate en mi hombro”, canta un miembro.

Pero los fans del grupo no pueden hacer ninguna de esas cosas, físicamente hablando, porque ninguno de los once miembros de Eternity es real.

Creado con tecnología de inteligencia artificial, Eternity es uno de los últimos programas de Corea del Sur que traspasa los límites entre el entretenimiento real y virtual. Pulse9, la empresa creativa y de gestión del grupo, cree que las estrellas generadas por ordenador tienen una gran ventaja sobre sus homólogos de la vida real.

Como ocurre con la mayoría de los grupos de K-pop, los miembros de Eternity incluyen al líder del grupo, cantantes, raperos y bailarines. Pero un miembro en particular, Zi En, puede hacerlo todo. «Zae-in tiene una combinación de características que son difíciles de lograr para la mayoría de los artistas humanos», dijo Park Ji-eun, director ejecutivo de la compañía. «Ella puede cantar muy bien, rapear muy bien y puede ser creativa como diseñadora (de moda). Es una actriz natural.

Con la ayuda de tecnología de intercambio de rostros en tiempo real y una voz generada por IA, Zae-in es interpretada por 10 personas diferentes, incluidos actores, cantantes y bailarines, que prestan sus talentos a su avatar según sea necesario. En uno de los videos publicados en Zae-in cuenta de instagramPor ejemplo, monta hábilmente una tabla larga junto al río Han en Seúl. Para el vídeo, sus creadores filmaron el truco con alguien cuyo rostro luego fue reemplazado por Zae-in.

«Está el músico pop Zae-in, la actriz Zae-in y la reportera Zae-in», dijo la estrella virtual a CNN en una entrevista por Zoom, en la que fue interpretada por un actor (aunque Pulse9 dijo que su programa de inteligencia artificial puede recrear a Zae-in). en voz y generar discurso sin intervención humana. «Hay muchos equipos, por lo que nuestra ventaja única es que podemos hacer lo que una sola persona no puede hacer».

«Lo único que no podemos hacer es firmar un autógrafo», añadió sonriendo.

La tecnología de intercambio de rostros en tiempo real y las primeras formas de «deepfakes» existen desde hace casi una década. En ese momento, los influencers virtuales eran amados Lil Miquela Y Especial rosado de Corea del Sur Ha conseguido un gran número de seguidores en línea en los campos de la moda y la música.

Pero los últimos avances en vídeo y audio generados por IA están facilitando que empresas como Pulse9 creen personajes virtuales atractivos, mientras que los avances en software de IA generativa como ChatGPT eliminan la necesidad de que estrellas como Zae-in sean “interpretadas” por cualquiera. Absolutamente.

Pulse9 inició el proceso de traer «vida» a la Eternidad diseñando la apariencia de sus miembros. El equipo de Park creó 101 caras digitales únicas, inspiradas en celebridades coreanas actuales, antes de dividirlas en cuatro categorías (llamadas «sexy», «linda», «inteligente» e «inocente») y reducir la selección a 11 a través de una encuesta en línea. .

Utilizando tecnología de captura de movimiento y deepfake, Pulse9 produjo el primer vídeo musical de la banda (para acompañar la canción titulada irónicamente «I’m Real») en 2021. La reacción al vídeo fue mixta. Muchos usuarios de las redes sociales sintieron que las expresiones faciales de los miembros de la banda parecían antinaturales y desconectadas de sus cuerpos, mientras que otros señalaron el efecto «valle inquietante», donde los espectadores se sienten perturbados por cosas que parecen humanos pero no lo son.

Pero cinco meses después, cuando Pulse9 lanzó el siguiente vídeo musical de Eternity, «No Filter», los seguidores notaron que el grupo era casi indistinguible de la realidad. «Me sorprende lo realista que es su voz y las imágenes parecen incluso más realistas que la primera canción», se lee en el comentario que más me gusta de YouTube.

“DTDTGMGN”, estrenada en octubre pasado, representa otro gran salto de calidad. «Hasta el año pasado, la cara era la única parte virtual del artista, pero hoy podemos crear (imágenes) de cuerpo entero basadas en tecnología de inteligencia artificial», dijo Park, y agregó que «No Filter» también se compuso usando inteligencia artificial (aunque Al- Bashar luego editó la canción y escribió la letra).

SM Entertainment, la agencia detrás de estrellas del K-pop como Super Junior, Girls’ Generation, Exo y otras, ha estado experimentando con inteligencia artificial. En 2020, la compañía presentó Aespa, un grupo formado por cuatro artistas humanos y sus homólogos virtuales. Después de lanzar el grupo, el fundador de SM, Lee Soo Man Anunciar Que el futuro del entretenimiento son “las celebridades y los robots”.

Por otra parte, la empresa gestora de BTS, Hybe, utilizó inteligencia artificial para modificar la pronunciación y el tono de un cantante, antes de lanzar una de sus canciones en seis idiomas: coreano, inglés, español, chino, japonés y vietnamita.

A principios de este año, Metaverse Entertainment, una agencia creada por el editor de videojuegos Netmarble y la empresa matriz de SM Entertainment, Kakao Entertainment, lanzó un grupo de chicas virtual, MAVE. A diferencia de Eternity, que se basa en el intercambio directo de caras, los cuatro miembros de MAVE fueron creados desde cero usando CGI.

Metaverse Entertainment utilizó tecnología de inteligencia artificial para crear rostros, incorporando características y peinados considerados más deseables en los cuatro personajes finales. La compañía utilizó tecnología de captura de movimiento para grabar presentaciones de K-Pop de la vida real, que el software de aprendizaje profundo utilizó para animar videos musicales. Kang Seung-ko, director artístico de Metaverse Entertainment, dijo que las voces del grupo son en parte voces humanas y en parte inteligencia artificial.

«Nuestro objetivo es crear humanos virtuales totalmente impulsados ​​por IA que sean realmente creíbles», dijo a CNN.

El vídeo musical del sencillo debut de MAVE, «Pandora», ha acumulado 25 millones de visitas en YouTube desde su lanzamiento en enero.

Las estrellas del pop virtuales pueden tener una ventaja sobre los humanos cuando se trata de interactuar con sus fans. Kang dijo que los avances en el software de lenguaje de inteligencia artificial podrían permitir a los fanáticos «hablar» con sus artistas favoritos e incluso establecer relaciones personales con ellos.

«Recordarán lo que hablamos ayer y podrán seguir hablando de cosas de (conversaciones anteriores)», dijo, comparando las creaciones de inteligencia artificial de su empresa con el asistente virtual del iPhone, Siri. «Ellos te recordarán y sabrán de ti, y te hablarán (contigo) basándose en esa información».

Metaverse Entertainment ya está experimentando con esta idea a través de aplicaciones que permiten a los usuarios interactuar directamente con MAVE. Actualmente, los miembros de la banda hablan coreano, inglés, francés e indonesio, lo que indica sus principales seguidores y mercados objetivo, aunque en teoría pueden hablar varios idiomas.

«Hay algunas cosas que no puedo decir (ni siquiera a mis amigos más cercanos), pero tal vez pueda decírselas a una IA personal, que pueda consolarme y cuidarme», dijo Kang. «Creo que será bueno para todos».

Sin duda, el desarrollo podría ser bueno para empresas como la de Kang. La industria del K-pop se basa en un agotador sistema de aprendizaje, donde los aspirantes son formados desde una edad temprana, a menudo pasando por años de costosas lecciones de baile y música antes de debutar. (Según el Wall Street Journal, SM Entertainment ha gastado Casi 3 millones de dólares (Llevó Girls Generation al mercado en 2007). Las agencias deben invertir en lecciones, espacio de estudio, estilismo y, a veces, procedimientos cosméticos para los miembros potenciales de la banda; costos que no se requieren para el talento virtual.

Además, las estrellas del pop generadas por computadora nunca se enfermarían, envejecerían ni se involucrarían en disputas contractuales o escándalos sensacionalistas. Pero hay pocas posibilidades de que las principales agencias reemplacen a sus bandas reales en el corto plazo, dijo Kang, reconociendo que algunas cuartas partes de la base de fans del K-pop han reaccionado mal ante los grupos de AI.

«La crítica fue sobre reemplazar a los ídolos actuales con ídolos virtuales; pensaron que los ídolos existentes podrían perder sus trabajos», dijo Kang, y agregó que algunos fanáticos siempre prefieren a los artistas humanos.

Park, fundador de Eternity, estuvo de acuerdo y comparó el surgimiento de la inteligencia artificial con la invención de la fotografía en el siglo XIX: “Muchos pintores tenían miedo de la (nueva) tecnología, pero hoy todavía tenemos pintores. Creo que BTS nunca tendrá miedo de los ídolos virtuales: son simplemente contenido nuevo.