AI와 함께 애니메이션 음악 비디오 만들기!

AI와 함께 애니메이션 음악 비디오 만들기!

목차:

1. 소개
2. AI를 활용한 음악 비디오 생성 방법
3. Suno AI를 통한 음악 생성
4. AI에 의한 가사 생성
5. 음악 트랙 확장
6. Midjourney를 사용한 씬 생성
7. MidJourney 버전 6과 버전 5의 차이
8. CapCut을 사용한 이미지 편집
9. Pika를 활용한 애니메이션 생성
10. 예술적 선택과 자유로움을 통한 창조적 프로세스
11. CapCut을 이용한 비디오 편집
12. 결론

🎵 AI를 활용한 음악 비디오 생성 방법

AI 예술과 애니메이션은 나에게 창조적인 세계로 인도해주었고, 저는 전에 생각도 못했던 단편영화를 만들 수 있게 되었습니다. 그런데 만약 저희가 쿨한 애니메이션 오프닝을 만들면서 동시에 자체 음악을 생성하고 싶다면 어떨까요? 도전 수락합니다! 오늘은 AI와 함께 24시간 안에 애니메이션 음악 비디오를 만들어보려고 합니다. 여기서부터 시작해봅시다!

🎹 Suno AI를 통한 음악 생성

먼저, 에픽한 애니메이션 음악을 구해야 합니다. 뮤직 스튜디오 없이 어떻게 음악을 만들 수 있을까요? 아직 2024년이니까 AI 친구들의 도움을 받아봐야 할 것 같습니다. 이번에는 Suno AI라는 새로운 친구를 소개합니다. Suno AI는 음악을 생성할 수 있는 AI 도구로, 일을 할 수 있을 겁니다. 여기에는 트렌디한 노래 목록이 있으니, 사람들이 만들어낸 멋진 음악들을 확인해보면서 시작해봅시다. 예를 들어, 이 미스틀토 뮤직은 멋지고 고급스러운 느낌이 나고, 핫 초콜릿 분위기도 좋군요. 그럼 이 터키 타임 음악은 어떨까요? 흥미로운 소리네요. 그리스 요리에 어울리는 컨트리 음악이며, 매우 좋아하고요. 꽤 괜찮은 결과가 나왔네요. 비슷한 분위기의 음악을 생성해보도록 해봅시다. 그럼 트랙을 만드는 방법에는 두 가지 옵션이 있습니다. 기본적인 노래 설명을 추가하여 트랙을 만들 수도 있고, 가사를 추가할 수 있는 커스텀 모드를 활용할 수도 있습니다.

🎶 AI에 의한 가사 생성

저희는 시작할 때 스타일로 '브레이킹 배드'를 애니메이션 뮤직 비디오로 재해석해보려고 합니다. 그래서 AI에게 '메스'와 '브레이킹 배드'라는 단어를 추가해봅시다. 실제로 AI가 생성하는 가사는 흥미로운 내용이 나와서 사용할 만한 것 같습니다. 그럼 음악을 생성해보세요. 멋진 80년대 레트로 분위기가 느껴지고, 오토 튠은 약간 강하긴 하지만 분위기는 괜찮아 보입니다. 조금 더 긴 버전이 필요하면 '노래 확장' 버튼을 눌러보세요. 각각 다른 확장 옵션들이 있으니 들어보면서 선택하면 되겠습니다. 음악 브릿지를 추가하는 것 같고, 각각의 느낌이 약간씩 다릅니다. 저는 이 드러마틱한 버전이 좋아서 선택하였는데, 영화 예고편 효과를 만들어줍니다. 따라서 우리는 이걸로 진행하기로 하고, 더 긴 곡을 만들어볼 수도 있지만, 첫 시도니까 이렇게 짧은 버전으로 진행해봅시다. '결합' 버튼을 클릭하여 완전한 트랙을 얻어내면 됩니다. 멋지네요, 고마워, Suno, 우리의 AI 음악가!

🎬 MidJourney를 사용한 씬 생성

이제 애니메이션으로 들어가기 위해, 다른 애니메이션 뮤직 비디오를 보고 영감을 받았습니다. 이제 씬을 스토리보드를 통해 생성해야 합니다. 그래서 MidJourney를 사용하여 챗GPT에게 해당 가사를 기반으로 사용 가능한 샷 목록을 제공해 달라고 요청했습니다. 챗GPT가 제공하는 콘텐츠가 항상 최고는 아니지만, 우리의 프로세스를 시작하기 위해 충분히 좋은 것 같습니다. 일단 프로세스를 시작하기 위해 사용하고, 내 마음대로 나머지를 창의성으로 완성해나갈 것입니다. 이렇게 샷 목록을 대략적으로 만들어낼 수 있습니다. 샷 목록을 만든 후에는 MidJourney를 사용하여 씬을 생성해야 합니다. 저는 v6과 v5 모두를 사용하여 이미지를 생성해보았습니다. 이 시점에서는 v6에 아직 niji 기능이 없는데, v5 niji로 생성된 이미지 중에서 원하는 결과에 더 가까운 것 같습니다. 그러나 v6도 멋지고, 샷 내부에서 Hank와 같은 캐릭터를 인식하며 멋진 결과물을 만들어내는 것을 알 수 있었습니다. 예를 들어, 그의 죽음의 순간이나 Gustavo의 장면입니다. 하지만 시간이 많이 남지 않았으니까 나머지 이미지를 생성한 뒤로 넘어가는 것이 좋겠습니다. MidJourney를 효과적으로 사용하는 방법에 대해 더 알고 싶다면, 아래 설명에 있는 다른 비디오도 확인해보세요.

🎨 CapCut을 사용한 이미지 편집

모든 이미지를 생성한 후에는 이제 CapCut에 넣어서 음악과 어울리는지 확인해야 합니다. 이 단계는 매우 중요한데, 크레딧을 절약하고 어떤 이미지를 어떻게 애니메이션화할지 결정하는 데 도움이 되기 때문입니다. 만족스럽게 조합할 수 있을 때, 사용할 이미지에 번호를 매기고 Pika로 이동하여 이미지를 애니메이션화하기 시작합니다. 일반적으로 부정적인 프롬프트를 추가하는 것이 유용합니다. 낮은 품질, 낮은 해상도, 흐릿한 왜곡, 뒤틀림 등, 애니메이션에 포함시키고 싶지 않은 요소들이라면 모두 추가해주면 됩니다. 물론 이것은 단지 첫 번째 단계일 뿐이며, 싫어하는 요소가 나타나면 추가적인 부정적인 프롬프트를 사용할 수 있어요. 예를 들어 얼굴과 몸이 뒤틀리는 것 같은 현상이 있다면 해당 용어를 추가하여 재생성하는 것이 정확도에 도움이 됩니다. 이미지에서 비디오로 전환할 때 매우 유용한 기능 중 하나는 모션 기능입니다. 일반적으로 모션 1로 설정하면 비디오가 더 많이 움직이고 확대 효과도 있을 수 있습니다. 그러나 모션 0으로 설정하면 카메라 효과 없이 애니메이션의 움직임이 적어지지만 애니메이션 자체가 더 안정적입니다. 다양한 결과를 얻기 위해 플레이어를 조정해야 하기 때문에 다양한 움직임을 얻으려면 설정을 조정해야 합니다. 이 과정에서 프롬프트를 구체적이고 간단하게 유지하려고 노력했습니다. 너무 많은 정보는 이미지에서 비디오로 전환하는 데 효과적이지 않을 수 있습니다. 예를 들어, 간단한 슬로모 샷이 필요한 경우 '시네마틱 슬로모'라고 입력하여 결과를 확인할 수 있습니다. 더 많은 움직임을 원하는 경우 추가 프롬프트를 추가해야 합니다. 파란 색 화학물질 샷의 예시를 들면, '물 흐르는 중'과 같은 용어를 추가하여 애니메이션에서 실제로 물이 흐르는 것을 볼 수 있습니다. 직접 생성할 때도 이러한 기능은 매우 유용하니까 꼭 사용해보세요. 시간이 많이 남지 않았으므로 Pika 인터페이스를 효과적으로 사용하는 방법에 대해 더 자세히 알고 싶다면 아래 설명에 있는 다른 비디오를 확인해보세요.

📽️ CapCut을 이용한 비디오 편집

몇 시간 동안 이미지를 생성한 후에 비디오 편집 도구인 CapCut을 사용하여 영상을 조각으로 만들어 보았습니다. 모든 것을 생각해보면 이 도전은 정말 즐거웠습니다. 음악과 애니메이션을 처음부터 생성하고 완성할 수 있다는 것은 꿈 같은 경험이었습니다. 이제 더 이상 말이 필요 없습니다. 최종 결과물을 감상하세요!

🎉 결론

AI를 활용하여 24시간 안에 애니메이션 음악 비디오를 만드는 도전을 완료했습니다. 이 경험은 정말 흥미로웠고, 음악과 애니메이션을 완전히 스스로 창조하는 것은 꿈 같은 일이었습니다. 이렇게 다양한 AI 도구를 활용하면 크리에이티브한 프로세스를 자유롭게 할 수 있습니다. 여기에는 제한이 없습니다. 스카이는 정말로 한계가 없습니다.