AI가 그린 '모헤댄스홀' 뮤직비디오 인기 네티즌: AI가 가사를 이해하는 느낌

AI 그림은 정말 강력합니다! 그림을 그리지 못하는 장애인을 지상에서 이륙시켜 "신카이 마코토"로 변신시키는 것 뿐입니다!

국경절 연휴 동안 스테이션 B의 '세상을 구한 개'라는 Up 소유자는 AI 생성 도구인 Midjourney를 사용하여 'Mohe Ballroom' 전곡의 MV를 더빙했습니다. AI가 그린 그림은 가사의 텍스트 내용과 매우 일치하기 때문에 많은 네티즌들은 그림 속 모헤의 밤 오로라가 이 노래를 들으면서 AI가 마음속에 그 장면을 그렸다고 말했습니다. 너무 아름다워!

AI 페인팅은 AIGC(AI-Generated Content) 비전-언어(Vision-Language) 연구 방향 중 하나, 즉 비전 텍스트, 텍스트 설명 입력 후 이미지 생성이 이 분야의 유물 중 하나입니다.

현재 AI가 그린 '모헤댄스홀' 뮤직비디오는 조회수 40만회, 좋아요 17만개를 기록 중이다.

1

AI는 나에게 멋진 세상을 그려주었습니다

2019년 12월, 포크 가수 Liu Shuang이 모허에서 음악을 수집하던 중, 지역 댄스홀에서 혼자 춤추고 있는 노인을 만났습니다. 대화 후 Liu Shuang은 그 사실을 알게 되었습니다. 노인의 아내는 1987년 따싱안링에서 일어난 '5월 6일' 산불 사고로 사망했습니다. 그 이후로 노인은 한 번도 재혼하지 않았으며, 춤을 좋아하는 아내를 추모하기 위해 춤을 좋아합니다. 이 이야기를 영감으로 삼아 "Mohe Ballroom"을 만들었습니다.

업의 '세상을 구한 개' 역시 '모헤볼룸'이라는 곡에 담긴 이야기에 감동을 받아, 곡의 창작 배경과 가사를 바탕으로 인공지능에게 웅장한 세계를 묘사하기 위해 노력했습니다.

"시간 있으면 나 좀 보러 올래? 눈이 얼마나 늙었는지 봐"라는 가사가 나올 때

AI는 숲 속에 혼자 서 있는 노인의 그림을 그렸습니다. 가는 길에는 머리 위로 빛나는 오로라와 두꺼운 얼음과 눈으로 뒤덮인 러시아식 건축물의 거리 풍경을 감상할 수 있습니다.

그러자 남자 목소리가 "내 눈이 어떻게 녹을 수 있지? 나를 본다면 어떨까요?"라고 불렀습니다.

가사 첫 줄에 AI가 눈물 흘리는 은빛의 초상화를 그렸습니다. -노인, 그리고 가사의 한 줄에는 백발의 할머니가 생각에 잠겨 고개를 숙이는 노인을 향해 살짝 몸을 기울이는 모습이 나온다. 몇 년 전이면 나도 너처럼 구식이었을 텐데.”, 지금 내 모습이 보이시나요?”

이때, 가사에는 “먼지는 바다에 봉인될 것이다. .."

죽음은 어린 생명을 앗아가고 기억과 육체는 바다에 봉인되게 되는데, 그림 속에는 드레스를 입은 여인이 망각의 강 아래 서서 과거를 돌아보고 있는 듯하다. .

노래 중간에 AI가 그린 모헤의 밤의 아름다운 오로라, 사람들로 가득한 댄스홀, 달빛을 향해 춤추는 여자, 베레모를 쓴 단발머리 소녀와 오로라가 스카이림의 밤을 꿰뚫는다.

"오로라가 나타나는 마을도 본 적 없고, 밤늦게 불꽃놀이 하는 사람도 본 적 없다"라는 가사가 또 나오네요.

그때 눈에 들어온 것은 빛나는 눈과 어린아이의 얼굴, 별들의 바다를 지닌 소년의 얼굴, 불꽃놀이가 가득한 하늘 아래 들판에 서 있는 붉은 옷을 입은 소녀였다.

그러면 이 노래에서 사람들이 가장 좋아하는 가사가 나옵니다. "저녁 별은 사람을 죽이고 불을 지르는 당신의 눈과 같습니다. 당신은 아무 말도 하지 않고 거친 바람이 나를 방해합니다." AI 그림 별이 빛나는 하늘을 반사하는 눈입니다. "별은 당신의 눈과 같습니다. 그들은 하늘에 불이 가득했던 밤을 지켜보며 불꽃이 당신의 몸을 삼키도록 두 사람이 풀밭에서 멀리 떨어져서 지켜보고 있습니다." 푸른 오로라 아래서 서로가 서로를 방해할까봐 조용히 서서 움직이는 것은 푸른 나무들과 귀들 사이로 불어오는 바람뿐이었다.

그러자 가수는 "3천 마일 떨어진 곳에서 우연히 당신을 만났습니다. 정원에서 치마가 춤추고 있었습니다.

그림은 청록색 오로라 아래에 있습니다."라고 노래했습니다. , 점차 다가오는 두 사람, 그리고 정원에 있는 하얀 드레스를 입은 여성의 뒷모습.

그리고 가사는 "1980년 모헤볼룸의 불빛 아래 아침 햇살이 흔들렸다."

AI가 막 떠오른 태양, 바닥에 사람의 실루엣을 그렸다는 거죠. 모헤볼룸의 천장부터 창문까지, 그리고 지난 세기 1980년대 모헤댄스홀은 사람들로 붐비고 "너도 있고 나도 있다"는 화려함으로 가득 차 있었습니다.

업의 주인 "세상을 구한 개"와 AI가 공동으로 놀라운 작품을 만들어냈다고 해야 할까요. 캐릭터 스타일이 동일할 뿐만 아니라, 다양한 장면이 밝은 색상과 절묘한 구성을 가지고 있습니다. 특히 붉은색 사진에서는 연회장에 있는 사람의 태양, 일광, 실루엣을 보면 AI가 이러한 요소를 이토록 합리적으로 하나의 사진에 담을 수 있다는 사실이 정말 놀랍습니다.

2 사람의 마음을 감동시키는 그림은 인간 작가가 노래의 배경과 가사의 의미를 해석하는 것은 물론, 가사가 만들어내는 분위기와 장면에 대한 상상도 빼놓을 수 없습니다.

AI가 그림을 그릴 때만 가사를 입력한다면 그런 텍스트 설명만으로는 AI가 상상한 그림을 정확하게 설명해야 AI가 어떤 그림인지 이해할 수 있습니다. 게다가 AI 페인팅은 하루아침에 완성되지 않습니다. 동일하거나 유사한 설명이 포함된 n개의 이미지 중에서 가사와 이미지에 가장 적합한 것을 선택하여 최종적으로 좋은 MV를 만들어야 합니다.

AI가 그린 '모헤댄스홀' MV '세상을 구한 개' 제작자가 대답한 것처럼 (AI가 가사를 이해한 것은 아니다) "내가 가사를 이해했다는 것이고, AI에게 엉터리 영어로 설명했다”며 “

일부 네티즌들은 “너무 아름답지만 이 그림 속 캐릭터들의 외모와 의상 스타일은 중국에서 나온 것 같지 않다”고 댓글을 달기도 했다. . "

"이 AI는 원래 학습 중이었을 것입니다. 나는 아시아인을 그리는 법을 배우지 않았습니다. "

"이 자료 라이브러리는 주로 아시아 출신이 아니며 동남아시아 및 남부의 사진도 거의 없습니다. 아시아라서 캐릭터가 러시아 느낌이 많이 나네요."

이 댓글은 모두 클릭되었습니다. 이로써 AI 페인팅의 현재 문제점이 해결되었습니다. 딥러닝 단계에서 많은 AI 생성 그리기 도구가 사용하는 데이터베이스는 대부분 유럽과 미국의 사진 웹사이트에서 가져온 것이므로 AI가 아시아인의 얼굴과 동양적인 이미지를 그리는 데는 덜 능숙합니다.

AI 페인팅은 아직 갈 길이 멀지만 모든 그림이 완전히 아름다운 것은 아닙니다. 인간 화가는 항상 특정 세부 사항을 조정해야 합니다. 위의 MV 스크린샷에서 확인할 수 있는 인물 사진 생성에는 여전히 많은 결함이 있습니다. AI 페인팅에는 "속눈썹이 머리카락과 섞여서는 안 된다", "캐릭터 팔다리가 조화롭지 않게 보인다", "머리 페인팅이 불완전하다" 등의 몇 가지 결함이 있지만 AI 페인팅이 정말 빠르게 진행되고 있다는 점을 인정해야 합니다. 간단한 아보카도 모양의 가구를 그릴 수 있게 되었고, 이제는 크고 웅장한 그림을 그릴 수 있게 되었는데, 전체적인 색감과 구성의 발전이 놀라울 정도입니다.

어쩌면 AI가 프레임 단위로 그림을 그리는 것이 아니라 연속적인 애니메이션을 만들어 내는 날이 오기를 기대합니다.

위 내용은 AI가 그린 '모헤댄스홀' 뮤직비디오 인기 네티즌: AI가 가사를 이해하는 느낌의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!