AI CREATOR NOTE(AI크리에이터 노트)에서는 Midjourney나 SeaArt 등의 이미지 생성 AI 툴과 Gen-3나 Kling AI등의 최신 동영상 생성 AI를 다룹니다.

【AI 영상 4종 테스트 — 미드저니·클링AI·나노바나나 최강 조합은?】비디오 생성 비교 분석 「프롬프트 공개」

안녕하세요. 오늘 기사는 최근에 업데이트 된 미드저니의 영상 생성 기능을 중심으로,
클링AI로 만든 영상과 나노바나나를 활용한 영상 생성 방식까지 비교해보려 합니다.

이번 글에서는 단순히 결과물을 감상하는 데 그치지 않고,
각 도구가 어떤 방식으로 영상을 생성하는지, 실제 사용 과정은 어떤 차이가 있는지도 함께 살펴보겠습니다.

먼저 아래에서 세 가지 도구로 생성한 결과물을 확인해보시죠.

워크플로우는 아래와 같습니다.

  • Kling AI 2.1 → Video (클링AI에서 텍스트로 직접 영상 생성)
  • Nanobanana → Kling AI 2.1 (나노바나나에서 생성한 이미지로 내 얼굴로 바꾼 뒤 클링AI에서 영상화)
  • Midjourney → Kling AI 2.1 (미드저니에서 이미지 생성 후 클링AI에서 영상화)

프롬프트 및 미드저니에서 직접 비디오로 생성한 결과는 아래에 있습니다.

그럼 실제 사용 과정을 살펴보겠습니다.

참고로, 이 과정을 YouTube 영상에서도 자세히 설명하고 있습니다.

영상이 전체 흐름을 확인하는 데 더 편리하다고 생각되니, 괜찮다면 한번 시청해 보세요.

개인적으로는, 영상을 통해 전체 흐름을 먼저 파악한 뒤, 복습용으로 블로그 글을 활용하는 것을 추천드립니다.

목차

미드저니에서 비디오 생성

먼저 미드저니에서비디오를생성하려면 먼저 이미지를 생성해야 합니다.

미드저니에서 이미지 생성

미드저니가 처음이신 분은 먼저 여기를 클릭해 기초 사용법부터 확인해보세요.

그럼 아래와 같이 이미지를 생성해 보겠습니다.

프롬프트

POV fisheye ultra wide-angle shot of a super muscular, hyper exaggerated Asian man wearing a cute maid costume, in a crowded Tokyo subway station, making a huge goofy smile with a big nose and big teeth, flexing massive biceps, wearing tiny round glasses, comedic TikTok viral style, comedic over-the-top expression, dynamic pose with hands pointing to camera, vivid colors, cinematic lighting, holding an energy drink can with splash, hyper realistic, in the style of Japanese comedic influencers, GoPro shot, cartoonish vibe, fun, energetic, motion blur –ar 9:16 –style raw –weird 300 –stylize 700 –v 7

흰 메이드 복을 입고 있고 음료를 들고 있는 일본 우스꽝스런 아저씨

꽤 재미있는 포즈의 이미지가 생성되었습니다.

프롬프트가 좀 복잡해 보이긴 합니다만 일단 번역을 하면 아래와 같습니다.

붐비는 도쿄 지하철역에서 귀여운 하녀 의상을 입은 매우 근육질의 과장된 아시아 남성의 POV 피쉬아이렌즈 초광각 촬영, 큰 코와 큰 이빨로 큰 우스꽝스러운 미소를 짓고, 거대한 이두근을 구부리고, 작은 둥근 안경을 쓰고, 코믹한 틱톡 바이럴 스타일, 코믹한 오버더톱 표현, 카메라를 손으로 가리키는 역동적인 포즈, 생생한 색상, 영화 조명, 에너지 드링크 캔을 들고 스플래시를 하는 모습, 매우 사실적인 모습, 일본 코미디 인플루언서 스타일의 고프로 촬영, 만화 같은 분위기, 재미있고 활기찬 모션 블러 촬영

핵심은 “POV fisheye ultra wide-angle shot” 입니다.

미드저니에서 비디오 생성

아래에 미드저니에서 즉시 비디오 생성 버튼을 클릭해서 생성한 결과가 있습니다.

미드저니에서 영상을 생성하는 방법은 상당히 쉽습니다.

미드저니에서 흰 메이드 복을 입은 아저씨 이미지를 생성하기 위해 프롬프트를 입력하는 캡처 화면

아래를 보시면 Auto에서 Low Motion이나 High Motion을 클릭하면 끝 입니다.

먼저 Low Motion으로 생성한 결과 입니다.

아래는 High Motion으로 생성한 결과 입니다.

이렇게 Low 및 High 둘 다 생성했는데 원하는 영상이 나오지 않을 경우 Animate Manually로 해주시면 됩니다.

Animate Manually관해서는 여기를 클릭해 확인해 주세요.

Low Motion: 움직임이 부드러운 전환이나 정적인 장면에 적합함.
High Motion: 속도가 빠르고 역동적인 장면에 적합함.

한마디로, 영화에서 천천히 카메라가 줌인·줌아웃하거나 슬로우 모션 장면을 연출할 때는 Low Motion을 사용하고, 액션, 차량 추격신, 스포츠, 동물의 빠른 움직임 같은 장면에는 High Motion을 사용하면 됩니다.

프롬프트로 첫 이미지를 만드는 것이 가장 중요하며, 영상을 만드는 자체는 비교적 어렵지 않습니다. 물론 ‘Animate Manually’ 기능을 사용하면 영상을 세밀하게 제어할 수 있지만, 카메라 모션이나 피사체의 움직임은 여전히 프롬프트로 조정해야 하기 때문에 약간의 난이도는 있습니다.

클링AI에서 비디오 생성

Image to Video

여기를 클릭해 클링AI 페이지로 이동하겠습니다.

클링AI에서의 비디오 생성 역시 상당히 쉽습니다. 단 미드저니에서 먼저 이미지를 생성해 image to video로 생성하는 것이 좋습니다.

물론, text to video로도 생성이 가능 합니다. 이와 관련된 방법은 다음 기사에서 소개할 예정입니다.

가입하고 먼저 비디오 생성을 클릭 합니다.

AI 비디오 생성 툴 클링AI의 홈페이지 메인화면 캡처

이미지를 화살표 방향으로 박스 안에 드래그 한 다음 생성을 누르면 끝! 상당히 쉽죠…

클링AI에서 이미지를 비디오로 생성하는 과정의 캡처 사진

간혹 프롬프트는 어떻게 해야합니까? 라는 질문을 많이 받지만 그냥 비워두셔도 됩니다.

아니면 미드저니 프롬프트를 그대로 붙여 넣어도 무방합니다.

카메라 움직임이나 모션에 관련된 프롬프트 역시 다음 기사에서 다루겠습니다. 좀 어려울 수 있으니…

결과는 아래와 같습니다. 영상 보시는 김에 팔로우도 부탁 드려요.^^

Text to video

불과 몇 개월 전만 하더라도(클링AI 2.1모델) text to video 생성이 그렇게 만족감이 높지는 않았습니다.

그래서 대부분 image to video로 생성했는데 최근에는 모델(2.5Turbo)이 엄청나게 발전하면서 text to video에 상당한 성능을 보여주고 있습니다.

Text to Video의 진짜 강점은 모션을 자유자재로 그려낼 수 있다는 데 있습니다. 다만 프롬프트를 잘 다루는 건 여전히 만만치 않죠.

그럼 미드저니에서 사용한 텍스트를 조금 변경해서 클링AI에서 Text to video를 생성해 보겠습니다.

프롬프트

POV fisheye ultra wide-angle shot of a super muscular, funny Asian man in a cute maid outfit, running while drinking from an energy drink can, big goofy smile, exaggerated expressions, Tokyo subway, comedic, chaotic, hyper-realistic, cinematic lighting, motion blur, splashing drink, TikTok viral style

한글로 번역하면 다음과 같습니다.

“귀여운 하녀 복장을 한 매우 근육질이고 재미있는 아시아 남성의 POV 어안 초광각 촬영, 에너지 드링크 캔을 마시며 달리는 모습, 큰 우스꽝스러운 미소, 과장된 표정, 도쿄 지하철, 코믹하고 혼란스럽고 초현실적인 모습, 영화 조명, 모션 블러, 튀는 음료, 틱톡 바이럴 스타일”

별거 없지요.. 미드저니의 프롬프트에서 아주 조금 변경한 것뿐입니다.

아래는 결과물 입니다.

좀 실패한 것 같아 프롬프트를 조정해 다시 생성했습니다.

역시 한 번에 원하는 결과를 얻는 건 쉽지 않네요.

프롬프트

POV fisheye ultra wide-angle shot of a super muscular, funny Asian man in a cute maid outfit, running while drinking from an energy drink can, big goofy smile, exaggerated expressions, Tokyo subway, comedic, chaotic, hyper-realistic, cinematic lighting, motion blur, splashing drink, GoPro head-mounted shot, fisheye lens close-up of an exaggerated, funny face while running forward. The camera is fixed to the head — the face stays close while the background rushes backward. Comedic, over-the-top style with vivid motion blur and cinematic lighting. TikTok viral style

“귀여운 하녀 복장을 한 매우 근육질이고 재미있는 아시아 남성의 POV 어안 초광각 촬영, 에너지 드링크 캔을 마시며 달리는 모습, 큰 우스꽝스러운 미소, 과장된 표정, 도쿄 지하철, 코믹하고 혼란스럽고 초현실적인 영화 조명, 모션 블러, 튀는 음료, GoPro 헤드 마운트 샷, 과장되고 재미있는 얼굴의 어안 렌즈 클로즈업, 앞으로 달리는 동안 카메라가 머리에 고정되어 있습니다. 얼굴은 가까이에 고정되어 있고 배경은 뒤로 돌진합니다. 코믹하고 오버더탑 스타일에 생생한 모션 블러와 영화 조명이 특징입니다. TikTok 바이럴 스타일”

거의 미드저니에서 이미지를 생성했던 프롬프트와 동일하지만 “GoPro 헤드 마운트 샷, 과장되고 재미있는 얼굴의 어안 렌즈 클로즈업, 앞으로 달리는 동안 카메라가 머리에 고정되어 있습니다. 얼굴은 가까이에 고정되어 있고 배경은 뒤로 돌진합니다. TikTok 바이럴 스타일” 이 부분을 추가하였습니다.

크레딧 아끼느라 일단 5초짜리로 먼저 테스트해봤습니다 😅

지금 계정을 키우는 중이므로 이것도 팔로우 해주시면 감사하겠습니다. ^^

바이럴 영상으로 나쁘지 않은 것 같네요.. 아직 바이럴은 되지 않았지만..ㅜㅜ

나노바나나 기초 사용법

일관성을 유지한 내 사진 사용

마지막 응용으로 일관성 끝판왕인 나노바나나에서 내 이미지를 이런 우스꽝스런 POV 이미지로 변경해 영상으로 만들어 보겠습니다.

이건 그냥 재미로 테스트 한 것이고 나노바나나에 대한 자세한 기사는 다시 다루겠습니다.

나노바나나에서 일관성을 유지한 내 얼굴로 변경하는 방법의 캡쳐 사진

조금 마음에 안 들면, 한 번 생성해 보고 나서 다시 변경해 달라고 요청하면 됩니다.

나노바나나에서 일관성을 유지한 내 얼굴로 변경하는 방법의 캡쳐 사진

안경을 끼고 있어서 그렇지 뭔가 저하고 상당히 비슷합니다.

이 이미지를 다운 받아서 클링AI 업로드 하면 끝. 요즘 AI 상당히 쉽습니다.

프롬프트는 동일합니다만 민감한 주제라고 거부되는 경우도 있습니다. 그럴 땐 일부 “cute maid outfit” 같은 프롬프트를 지우고 다시 생성하면 됩니다.

결과는 아래와 같습니다.

이건 뭐 상당히 자연스럽게 나왔습니다. 사운드 역시 자동 생성인데 놀랍도록 진짜처럼 들리네요..

뭐. 오늘은 하나의 주제로 다양하게 테스트하는 거니 좀 지루함이 있어도 끝까지 봐주세요.

최근 인기 있는 영상 생성AI 비교 분석

아래는 최근 인기 있는 영상 생성 AI 몇 가지를 비교해봤습니다.

보시면 첫 번째 영상만 미드저니에서 직접 비디오를 생성한 것이고 나머지는 미드저니에서 이미지 생성 후 image to video로 생성 한 것입니다.

  • Midjourney → Video (미드저니에서 직접 영상 생성)
  • Midjourney → Kling AI 2.1(미드저니에서 이미지로 영상화)
  • Midjourney → Hailuo 02 (미드저니에서 이미지로 영상화)
  • Midjourney → Wan 2.5 (미드저니에서 이미지로 영상화)

보시면 많은 도움이 될까 생각 합니다.

보는 사람마다 생각은 다르겠지만 약간 분석해보면

미드저니는 영상 퀄리티는 좋지만 달리는게 좀 느리고 클링AI는 속도감은 좋으나 카메라가 약간 뒤로 빠지는 부분과 영상 화질이 좀 변한다는 것.

하이루오는 달리거나 움직이 없어 영상을 편집한다면 마지막 장면에 넣으면 좋을 것 같고

완 2.5는 움직임이 너무 빠르네요…

뭐 어쨌든 영상 생성AI의 발전 속도는 상당히 빠르네요.

다음 기사에서는 최근에 가장 핫 한 Sora2와 Kling 2.5 Turbo를 비교해 볼까 합니다만 설문을 통해 글을 쓸까도 생각 중입니다.

동영상 생성의 흐름 정리

다시 동영상을 만드는 흐름을 정리하면

1️⃣ 이미지 생성 AI로 이미지 만들기
2️⃣ 동영상 생성 AI로 이미지를 동영상으로 만들기
3️⃣ 생성한 동영상을 편집으로 연결

라는 흐름이 됩니다.

처음에는 익숙해질 때까지 조금 시간이 걸릴 수 있지만, 한 번 익숙해지면 비교적 빠르게 영상을 만들 수 있습니다.

전체적인 흐름 자체는 그렇게 어렵지 않다는 것을 이해했을 것 같습니다.

하지만 가장 어렵고(중요한) 포인트는, 이상적인 원하는 이미지를 제대로 생성하는 것입니다.

지브리 만화를 실사화 한 사진

위와 같은 실사 느낌의 영상을 만들고 싶다면, 이미지 하나만 보고도 어떤 애니메이션(만화)인지 알 수 있을 정도의 퀄리티로 만드는 것을 추천합니다.

또한, 오리지널 영상을 만들 때도 각각의 이미지 스타일을 확실히 통일하면, 높은 퀄리티의 영상을 만들 수 있습니다.

처음 만든 이미지의 퀄리티가 낮으면 영상 전체의 퀄리티도 떨어지기 때문에, 이미지를 만드는 연구가 필요할 것 같습니다.

참고로 저는 지난 1년간 AI 툴에 약 300만원 정도를 지출하며, 매일 이미지 생성을 반복해왔습니다.

덕분에 어느 정도 의도한 대로 이미지를 생성할 수 있게 되었습니다.

기사나를 읽는 분들 중에는

• 목표 이미지를 잘 만들 수 없다
• 독학으로는 한계가 있다
• 만드는 방법은 알지만 퀄리티를 높일 수 없다
• SNS가 전혀 늘지 않는다

등, 여러 문제로 고민하는 분들도 많을 것 같습니다.

그래서 제가 지금까지 실천해온 것과, 학습 속도를 빠르게 할 수 있는 포인트를 여기에 정리했습니다.

위와 같은 고민이 있는 분들은, 꼭 확인해 보시기 바랍니다.

동영상 생성 AI를 활용한 머니타이즈 방법

그럼 마지막으로, 수익화 방법에 대해서도 간단히 말씀드리겠습니다.

여러 가지 방법이 있지만, YouTube나 TikTok의 광고 수익이 가장 상상하기 쉬울 것 같습니다.

광고 수익

YouTube에서 동영상이 100만회 재생되면 약 30만엔 전후. TikTok에서 100만회 재생하면 약 5만엔 전후의 수익이 발생합니다.

대략적인 광고 단가는?

YouTube에서 영상이 100만 회 재생되면 약 300만원 정도, TikTok에서 100만 회 재생되면 약 50만원 정도의 수익이 발생합니다.

광고의 양이나 콘텐츠에 따라 금액은 변동이 있지만, 어쨌든 퀄리티 높은 영상을 만들면 누구에게나 기회가 있습니다.

100만 회라고 하면 어렵게 느껴질 수도 있지만, AI 영상은 신선한 콘텐츠이기 때문에 비교적 바이럴되기 쉬운 분야입니다.

물론 한 영상만으로 달성할 필요는 없고, 여러 영상으로 달성해도 문제 없습니다.

저 역시 AI 영상을 활용해 Instagram, TikTok, X 등을 시작 했고 YouTube 광고 수익도 올리고 있습니다.

이렇게 한 번 제대로 배워둔 프롬프트는 영상이든 이미지든 생성하기 쉽기 때문에 AI툴 하나 정도는 마스터를 해야 한다고 생각합니다.

저는 초보자라면 꼭! 먼저 마스터해야 할 AI 툴이 미드저니라고 생각합니다.

또한, 전자책의 가격은 수시로 인상되고 있으니 이 점 감안하시어 구매를 결정하시기 바랍니다.

여러 설명은 무료 부분에서 진행하고 있으니, 조금이라도 관심이 있는 분은 꼭 확인해 보시기 바랍니다.

그럼 또 뵙겠습니다.

도움이 되셨다면 공유해 주세요!
  • URLをコピーしました!
  • URLをコピーしました!
목차