AI 기반 가상 K-Pop 밴드가 한국에서 증가하고 있습니다.

CNN
—

최신 싱글 ‘DTDTGMGN’ 뮤직비디오에서 한국의 보이밴드 이터니티(Eternity) 멤버들은 교복과 연예인 포스터로 장식된 네온 핑크색 방에서 팝 음악에 맞춰 춤을 추고 있다. 놀라운 카메라 움직임과 빠른 장면 전환은 최근 전 세계적인 현상으로 자리잡은 K팝 장르의 전형이다.

한 멤버는 “나를 꼭 안아줘, 내 어깨에 기대어줘”라고 노래한다.

하지만 이터니티의 팬들은 물리적으로 말해서 그런 일을 할 수 없습니다. 왜냐하면 Eternity의 11명의 멤버 중 누구도 실제 멤버가 아니기 때문입니다.

인공 지능 기술을 사용하여 제작된 Eternity는 실제 엔터테인먼트와 가상 엔터테인먼트의 경계를 넓힌 한국의 최신 쇼 중 하나입니다. 그룹의 크리에이티브 및 매니지먼트 회사인 펄스나인(Pulse9)은 컴퓨터로 만들어진 스타가 실제 스타보다 큰 이점을 가지고 있다고 믿습니다.

대부분의 K-pop 그룹과 마찬가지로 Eternity의 멤버에는 그룹의 리더, 가수, 래퍼, 댄서가 포함됩니다. 하지만 특히 지은이라는 한 멤버는 모든 걸 해낼 수 있어요. 소속사 박지은 대표는 “재인은 대부분의 인간 아티스트가 달성하기 어려운 특성의 조합을 갖고 있다”고 말했다. “노래도 잘하고, 랩도 잘하고, (패션)디자이너로서 창의력도 발휘할 수 있는 타고난 배우예요.

실시간 얼굴 교환 기술과 AI 생성 음성의 도움으로 재인은 배우, 가수, 댄서 등 10명의 서로 다른 사람들이 연기하며 필요에 따라 재인의 아바타에 자신의 재능을 빌려줍니다. 재인에 올라온 영상 중 하나에서 인스타그램 계정예를 들어, 그녀는 서울 한강 옆에서 롱보드를 능숙하게 탄다. 영상의 경우 제작자는 나중에 재인으로 얼굴이 교체된 사람과 함께 스턴트를 촬영했습니다.

가상 스타는 배우가 연기한 Zoom 인터뷰에서 CNN과의 인터뷰에서 “팝 뮤지션 재인, 배우 재인, 기자 재인이 있다”고 말했다. 사람의 개입 없이 음성으로 말하고 생성합니다. “의상이 많아서 한 사람이 할 수 없는 일을 할 수 있다는 게 우리만의 장점이에요.”

“우리가 할 수 없는 유일한 일은 사인에 서명하는 것입니다.” 그녀는 눈을 웃으며 덧붙였다.

실시간 얼굴 교환 기술과 초기 형태의 “딥페이크”가 등장한 지 거의 10년이 되었습니다. 당시 가상 인플루언서는 큰 사랑을 받았다. 릴 미켈라 그리고 대한민국 로제 스페셜 그녀는 패션과 음악 분야에서 온라인에서 큰 인기를 얻었습니다.

그러나 AI 생성 비디오 및 오디오의 최신 발전으로 인해 Pulse9과 같은 회사는 매력적인 가상 캐릭터를 더 쉽게 만들 수 있게 되었으며, ChatGPT와 같은 생성 AI 소프트웨어의 발전으로 Zae-in과 같은 스타가 누구에게나 “연기”될 필요가 없어졌습니다. 전적으로.

펄스나인은 멤버들의 외모를 디자인하며 영원에 ‘생명’을 불어넣는 과정을 시작했다. 박 팀은 현재 한국 유명 인사들로부터 영감을 받아 101개의 고유한 디지털 얼굴을 만든 후 이를 ‘섹시함’, ‘귀엽다’, ‘똑똑한’, ‘청순함’이라는 4가지 범주로 나누고 온라인 여론 조사를 통해 선택 범위를 11개로 좁혔습니다. .

Pulse9은 딥페이크와 모션 캡처 기술을 사용하여 2021년에 밴드의 첫 번째 뮤직 비디오(아이러니하게도 제목이 붙은 노래 “I’m Real”과 함께)를 제작했습니다. 비디오에 대한 반응은 엇갈렸습니다. 많은 소셜미디어 이용자들은 밴드 멤버들의 얼굴 표정이 부자연스럽고 몸과 분리되어 보인다고 느꼈고, 다른 사람들은 시청자들이 인간처럼 보이지만 그렇지 않은 것에 불안감을 느끼는 ‘불쾌한 계곡’ 효과를 지적했습니다.

그러나 5개월 후 Pulse9이 Eternity의 다음 뮤직 비디오인 “No Filter”를 공개했을 때 추종자들은 이 그룹이 실제 그룹과 거의 구별할 수 없다는 것을 알아차렸습니다. 유튜브의 가장 좋아요 댓글에는 “그녀의 보컬이 얼마나 사실적인지에 놀랐고, 비주얼은 첫 번째 노래보다 훨씬 더 현실적으로 보입니다.”라고 적혀 있습니다.

지난 10월 출시된 ‘DTDTGMGN’은 품질 면에서 또 한 번의 큰 도약을 의미합니다. 박씨는 “작년까지는 연기자의 가상 부분이 얼굴뿐이었는데, 이제는 AI 기술을 기반으로 전신(이미지)을 만들 수 있게 됐다”며 “No Filter” 역시 AI를 활용해 작곡했다고 덧붙였다. 그런 다음 Bashar는 노래를 편집하고 가사를 썼습니다.)

슈퍼주니어, 소녀시대, 엑소 등 K팝 스타를 배출한 소속사인 SM 엔터테인먼트는 인공지능을 실험해 왔다. 2020년에 회사는 4명의 인간 아티스트와 그들의 가상 아티스트로 구성된 그룹인 Aespa를 데뷔했습니다. 그룹 론칭 후 SM 창업주 이수만 발표하다 엔터테인먼트의 미래는 ‘연예인과 로봇’이다.

한편, 방탄소년단의 소속사 하이브는 인공지능을 활용해 가수의 발음과 음조를 수정한 뒤 그의 노래 중 하나를 한국어, 영어, 스페인어, 중국어, 일본어, 베트남어 등 6개 국어로 출시했다.

올해 초 비디오 게임 퍼블리셔인 넷마블과 SM 엔터테인먼트의 모회사인 카카오 엔터테인먼트가 만든 소속사인 메타버스 엔터테인먼트는 가상 걸그룹 메이브(MAVE)를 론칭했습니다. 직접 얼굴을 바꾸는 이터니티와 달리 MAVE의 네 멤버는 CGI를 사용하여 처음부터 만들어졌습니다.

Metaverse Entertainment는 AI 기술을 사용하여 얼굴을 만들고 가장 바람직하다고 생각되는 특징과 헤어스타일을 최종 4명의 캐릭터에 통합했습니다. 이 회사는 모션 캡처 기술을 사용하여 실제 K-Pop 공연을 녹화했으며 딥 러닝 소프트웨어는 뮤직 비디오를 애니메이션화하는 데 사용했습니다. 메타버스 엔터테인먼트의 강승코 예술최고책임자는 그룹의 보컬이 인간의 목소리와 인공지능의 목소리로 구성됐다고 말했다.

그는 CNN과의 인터뷰에서 “우리의 목표는 진정으로 믿을 수 있는 완전한 AI 기반 가상 인간을 만드는 것”이라고 말했다.

메이브의 데뷔 싱글 ‘판도라(Pandora)’ 뮤직비디오는 지난 1월 공개 이후 유튜브 조회수 2,500만 회를 기록했다.

가상 팝스타는 팬층과 상호 작용할 때 인간보다 유리할 수 있습니다. 강씨는 AI 언어 소프트웨어의 발전으로 팬들이 자신이 좋아하는 아티스트와 ‘대화’할 수 있을 뿐만 아니라 그들과 개인적인 관계를 구축할 수도 있다고 말했습니다.

그는 회사의 AI 창작물을 아이폰의 가상 비서인 시리(Siri)와 비교하면서 “그들은 우리가 어제 이야기한 내용을 기억하고 (이전 대화) 내용에 대해 계속 이야기할 수 있습니다.”라고 말했습니다. “그들은 당신을 기억하고 당신에 대해 알게 될 것이고, 그 정보를 바탕으로 (당신에게) 이야기할 것입니다.”

Metaverse Entertainment는 사용자가 MAVE와 직접 상호 작용할 수 있는 앱을 통해 이미 이 아이디어를 실험하고 있습니다. 밴드 멤버들은 현재 주요 팬층과 목표 시장을 나타내는 한국어, 영어, 프랑스어, 인도네시아어를 구사하지만 이론적으로는 다양한 언어를 구사할 수 있습니다.

강씨는 “(가까운 친구들에게도) 할 수 없는 말들이 있지만, 나를 위로하고 보살펴 줄 수 있는 개인 AI에게 말해줄 수는 있을 것”이라고 말했다. “내 생각엔 모두에게 좋을 것 같아요.”

이러한 발전은 확실히 강씨와 같은 회사들에게는 좋은 일이 될 수 있습니다. K-pop 산업은 지망자가 어릴 때부터 형성되고 종종 데뷔하기 전에 수년간 값비싼 댄스 및 음악 수업을 거치는 힘든 견습생 시스템에 의존합니다. (월스트리트저널에 따르면 SM 엔터테인먼트는 거의 3백만 달러 (그는 2007년에 소녀시대를 시장에 내놓았습니다.) 대행사는 잠재적인 밴드 멤버를 위한 레슨, 스튜디오 공간, 스타일링, 때로는 미용 절차에 투자해야 합니다. 이는 가상 인재에게는 필요하지 않은 비용입니다.

더욱이, 컴퓨터로 만들어진 팝스타는 결코 아프거나 늙거나 계약 분쟁이나 타블로이드 스캔들에 연루되지 않을 것입니다. 그러나 강씨는 K팝 팬층의 일부가 AI 그룹에 좋지 않은 반응을 보였다는 점을 인정하면서 주요 기획사가 조만간 실제 밴드를 교체할 가능성은 거의 없다고 말했다.

강씨는 “현재 아이돌을 가상 아이돌로 대체한다는 비판이 있었다”며 “기존 아이돌이 일자리를 잃을 수도 있다고 생각했다”고 말했다. 일부 팬들은 항상 인간 아이돌을 선호한다고 덧붙였다.

이터니티 창업자인 박 대표는 인공지능의 등장을 19세기 사진의 발명에 비유하며 “많은 화가들이 (신)기술을 두려워했지만 오늘날에도 여전히 화가들이 있다. 내 생각에 방탄소년단은 결코 가상 아이돌을 두려워하지 않을 것이다. 그것은 단지 새로운 콘텐츠일 뿐이다.