Q. 이 캔 뚜껑 위에서 반짝이며 퍼져나가는 불빛들이 자연스럽게 퍼져 나가도록 동영상을 만들고 싶은데 잘 안되요?
A. 이미지 생성은 Midjourney로 깔끔하게 잘 만드셨는데 이런 반딧불 같은 노란 불빛고 연기처럼 퍼져 나가는 푸른 연기? 불빛? 자연스럽게 퍼져나가는 VFX 특수효과로 옛날 같은면 3D 프로그램으로 파티클 애니메이션 잘하는 고급 기술자들이 몇 일에 걸쳐 만들어야 하는 스킬입니다. 영상은 잘 될지 잘 안될지 지금은 알 수가 없어 Runway Gen-4 Turbo로도 만들어보고 Kling AI 1.6으로도 만들어 봐야 알 수 있을거 같습니다.
이런 경우는 보통은 동영상 만들 때 Image to video를 하더라도 프롬프트를 안써주고 만들어진 결과가 좋은 때가 많은데 반대로 예사롭지 않은 움직임을 기대해야 할때는 프롬프트 작성을 해주는게 더 좋은 결과를 만들어 낼 수 있습니다.
점점 Runway와 Kling AI 중 어떤 AI 모델이 더 동영상 결과가 잘 나오냐고 질문을 하면 거의 대부분 Kling AI가 더 동영상 생성을 잘 한다고 답을 할 것입니다. 그래서 우선 프롬프트 작성 하지 않고 만든 결과부터 비교해 보겠습니다.
동영상 서비스가 종료되어 해당 콘텐츠를 재생할 수 없습니다.
Runway Gen-4 Turbo 동영상 프롬프트 없이 만든 결과입니다.
동영상을 만든건지 안만든건지 구분이 안될 정도로 결과가 실망적입니다. ㅋㅋㅋ
동영상 서비스가 종료되어 해당 콘텐츠를 재생할 수 없습니다.
Kling 1.6 동영상 프롬프트 없이 만든 결과입니다.
ㅋㅋ 다이너마이트 심지 타들어 가는 것 같기도하고 뚜껑 열린 요술램프에서 알라딘 나오기 직전 처럼 연출이 되었지만 그래도 Runway 보다는 결과가 좋으니 이래서 Kling 손을 들어주는 사람들이 많은거 같습니다.
이 두 결과를 보니 동영상 프롬프트를 간단하게 작성해서는 결과가 별로 좋지 않을 것으로 예상이 되어 저는 ChatGPT4o 도움을 받아 작성할 필요가 있다는 판단을 하게됩니다.
ChatGPT에게 이미지를 첨부하고 이렇게 요청합니다.
ChatGPT 질문 원본:
캔 위에 빛나는 섬광과 불빛은 그 모양 그대로 계속 화면 왼쪽으로 파도치듯 웨이브 움직임으로 아름다운 빛을 발산하며 퍼져나가는 영상이 만들어 지도록 런웨어 gen-4 turbo 동영상 프롬프트 만들어줘
ChatGPT 답변 Prompt:
A magical cinematic shot of a shiny metal can on a textured dark surface. From the top of the can, radiant particles and golden light waves emerge and begin to flow smoothly to the left. The sparkling light forms a glowing wave, gently undulating like ripples in water, spreading across the frame with soft motion. Tiny star-like particles shimmer and trail behind, creating a dreamlike atmosphere. The background remains softly blurred with bokeh lights, highlighting the magical energy as it flows. Fluid motion, elegant particle effects, fantasy-inspired lighting, cinematic wave animation.
Deepl 번역:
질감이 있는 어두운 표면 위에 반짝이는 금속 캔이 마법 같은 시네마틱 장면을 연출합니다. 캔의 상단에서 빛나는 입자와 황금빛 빛의 파동이 나타나 왼쪽으로 부드럽게 흐르기 시작합니다. 반짝이는 빛은 물결처럼 부드럽게 파문을 일으키며 부드러운 움직임으로 프레임 전체에 퍼져나가는 빛나는 물결을 형성합니다. 별처럼 작은 입자가 반짝이며 뒤에서 흔적을 남기며 몽환적인 분위기를 연출합니다. 배경은 보케 조명으로 부드럽게 흐릿하게 처리되어 흐르는 마법 같은 에너지를 강조합니다. 유려한 모션, 우아한 파티클 효과, 판타지에서 영감을 받은 조명, 시네마틱한 파도 애니메이션.
이렇게 만들어진 동영상 영문 프롬프트를 동영상 생성할때 넣어서 만든 결과입니다. 이번에는 Kling부터 결과 확인해 보겠습니다.
동영상 서비스가 종료되어 해당 콘텐츠를 재생할 수 없습니다.
Kling 1.6 동영상 프롬프트 추가하고 만든 결과입니다.
역시 프롬프트 없이 만든 결과보다 프롬프트 디테일하게 작성해서 만든 결과가 더 좋아졌습니다. 이 정도 3D VFX 특수효과 만들려면 엄청난 시간과 비용이 발생 할텐데.... 이런거 생각하면 세상 좋아졌네요.
동영상 서비스가 종료되어 해당 콘텐츠를 재생할 수 없습니다.
Runway Gen-4 동영상 프롬프트 추가하고 만든 결과입니다.
결과 보시면 아시겠지만 처음 만들었던 결과와 지금 결과는 극과 극입니다. 에피소드는 프롬프트 넣어서 만들 때 처음에는 Gen-4 Turbo로 만들었는데 역시나 프롬프트 넣어도 결과가 별로여서 포기하고 Kling이 최종 승자입니다라고 해야 하는데 혹시 몰라 Turbo말고 그냥 Gen-4로 한번 더 만들었는데 이런 멋진 결과가 만들어 졌어요. Gen-4 Turbo는 동영상 생성 속도가 빠른 특징이 있고, 그냥 Gen-4는 결과가 더 잘나오는 특징이 있지만 동영상 생성 속도는 좀 느리겠죠.
결론:
잘만 사용하면 비싼 Kling AI보다 좀더 저렴한 Runway 결과가 좋을 때도 있다. ^^