RunwayML GEN2 | Motion Brush │동영상 AI 사용 팁

Runway Gen-2(RunwayML 공식 사이트 바로 가기 클릭!)는 텍스트 입력만으로 동영상을 생성할 수 있는 AI 도구입니다. 높은 정밀도와 고품질을 겸비한 동영상을 생성하는 것으로 유명합니다. 특히 사용 방법 역시 매우 심플하고, 직관적이라 사용자가 매우 간편하게 이용할 수 있습니다. 이번 포스팅에서는 Runway Gen-2의 주요 기능들을 소개하는 한편, 특히 최근 발표하여 화제가 되고 있는  Motion Brush 기능의 구현 방법과 생성 결과를 공유하고, 서비스 이용 시 미리 알아두면 좋을 팁들도 정리하겠습니다. 시작 전 미리 말씀드리면, 정말 놀랍습니다. 

베드 타임 스토리 (BedTimeStory) │총정리│AI 동화책 자동 제작 방법

이미지 동영상 초간단 생성 AI │Genmo AI

 

1. RunwayML GEN2 | Motion Brush 살펴보기  

본격적인 RunwayML GEN2의 설명에 앞서 우선 최근 화제가 되고 있는 Motion Brush 기능 먼저 아래 영상을 통해 확인해 보겠습니다. 

Motion Brush Techniques | Runway Academy

LoRA 등 다양한 애니메이션 초간단 생성법│Animagine XL 2.0 사용법과 후기

 

2.  Runway GEN2 주요 기능 

Runway Gen-2의 핵심 기능은 첫째, 텍스트에서 동영상을 생성하는 것입니다. 사용자는 프롬프트에 시나리오와 상황 묘사를 입력하면, 인공지능이 이를 기반으로 실시간 동영상을 생성합니다. 둘째 이미지에서 동영상을 생성할 수도 있습니다. 사진, 일러스트레이트 등의 이미지를 동영상으로 변환하여 생성할 수 있습니다. 셋째 이미지와 텍스트를 조합하여 동영상을 생성할 수도 있습니다. 이렇게 하면 동영상의 초기 프레임이나 배경으로 특정 이미지를 사용할 수도 있어 보다 구체적인 시각화 효과를 얻을 수 있습니다.  이 외에도 생성된 동영상의 품질, 길이, 스타일 등 다양한 파라미터 조정이 자유롭고, 클라우드 기반의 온라인 플랫폼으로서 별도의 소프트웨어를 다운로드하여 설치할 필요도 없습니다.  더욱이 무료 과금 정책(Runway Gen-2 과금 정책 확인 바로 가기!) 도 운영하고 있으며, 기본적인 동영상 생성과 다운로드가 가능하여 처음 서비스를 이용하는 사용자들이 충분히 해당 기능들을 테스트해 볼 수도 있습니다.  

RunwayML │ Start with Image

그럼 이제 직접 사용해 보겠습니다. 먼저 Runway Gen-2의 웹사이트(RunwayML 웹사이트 바로 가기 클릭!) 이동합니다.. 위의 이미지를 클릭해도 됩니다.  "Sign up" 버튼을 클릭하여 이메일 계정을 이용하여 서비스 계정을 생성합니다. 등록한 메일 주소로 컨펌 메일이 발송되므로 해당 링크를 클릭하여 계정을 활성화합니다.  이번 포스팅에서는 Runway Gen-2의 주요 기능 중 이미지를 동영상으로 변환하여 생성하는 방법을 중심으로 설명한 후, 최근 새롭게 선보인 Motion Brush 기능을 적용하고 각각의 구현 결과를 업로드하여 비교하며 살펴보겠습니다. 이제 위 이미지처럼 Runway GEN2의 웹사이트의 start with image 버튼을 클릭합니다. 

Fooocus│구글코랩(Google Colab) 초간단 단계별 설치 및 실행 방법

 

3. 이미지를 동영상으로 변환 생성 방법

아래 이미지는 이미지를 동영상으로 변환하여 생성한 결과 화면입니다. 각 번호 순서대로 진행하면 됩니다. 첫째 텍스트, 이미지, 텍스트와 설명 메뉴 중에 이미지를 선택합니다. 둘째 동영상으로 변환할 이미지를 업로드합니다. 예제 파일은 지난 AI Green 관련 포스팅에서 생성했던 이미지를 계속 이용하겠습니다. 셋째, 파라미터를 조정합니다. Motion Brush 왼쪽에 있는 메뉴들을 클릭하여 좌우, 줌인아웃 등의 파러미터 값을 사용자가 직접 지정할 수 있습니다. 넷째, Generate 4s 버튼을 클릭하면, 동영상 변환 과정을 동시에 보여주며, 4초 길이의 영상이 완성되면 다운로드도 무료로 할 수 있게 됩니다. 

Runway Gen-2 │이미지를 동영상으로 생성하는 절차

 

4. 이미지를 동영상으로 생성 결과

앞서 설명한 절차대로 진행한 후, 이미지를 동영상으로 생성한 결과는 아래와 같습니다. 자연스러운 움직임이 마치 살아 움직이는 듯한 착각을 불러일으킬 정도의 높은 정밀도와 품질을 보여주고 있습니다. 

RunwayML GEN2 | 이미지를 동영상으로 생성한 결과 영상  

완성된 결과물은 RunwayML에 공유할 수도 있으며, 아래 이미지를 클릭하면, 위의 동영상 결과물을 확인할 수 있습니다. 

Runway

피카(PiKa) 기본 기능, 사용법 및 유의사항 총정리 │사용 설명서

 

5. Motion Brush 기능을 활용한 동영상 생성 방법

이미지를 업로드한 후, Motion Brush 메뉴를 클릭하면, 아래와 같은 이미지의 서비스 화면으로 전환됩니다. Motion Brush 기능은 첫째 브러시 아이콘을 클릭하여 활성화한 후, 동영상으로의 생성을 원하는 특정 이미지 부분을 브러시로 색칠하듯이 지정합니다. 물론 지정이 잘못된 경우 지우개 아이콘을 이용하여 지정을 취소할 수도 있습니다. 둘째 브러시로 동영상 생성 영역을 지정하였다면, 좌우 상하 등 움직임에 대한 파라미터를 별도 지정할 수 있습니다. 셋째, 파라미터까지 완료하였다면 save 버튼을 클릭하여 저장합니다. 그럼 동영상 생성 작업 화면이 나타나고 잠시 후, 동영상 생성 결과를 확인할 수 있습니다. 

RunwayML │ Motion Brush 실행 방법

LensGo AI│지브리(Ghibli) 애니메이션 이미지 동영상 생성 방법

 

6. Motion Brush  생성 결과

지난 포스팅에서 생성했던 이미지를 RunwayML GEN2의 Motion Brush 기능을 적용하여 생성한 결과는 아래 동영상과 같습니다. 직접 한 번 확인해 보기 바랍니다. 

RunwayML GEN2| Motion Brush 구현 결과 

Moonvalley AI│Text to Video, Image to Video │디스코드 사용법과 팁

[총정리] Decohere AI 사용법 │텍스트, 이미지로 동영상 무료 생성 방법

 

7. 사용 TIP

Runway GEN2를 이용하여 동영상을 생성하는 경우 사전에 몇 가지 사용 팁을 정리하면 다음과 같습니다. 첫째, 이미지를 업로드하여 동영상을 생성할 경우 프롬프트는 비워두고 생성하는 것이 좋습니다. 이렇게 해야 원본 이미지가 동영상의 첫 번째 프레임으로 처리되고, 그 이후 프레임이 자동 생성됩니다. 둘째 「Assets」→「Forders」에서 과거 생성한 동영상을 확인할 수 있어 보다 효율적인 작업이 가능합니다. 셋째 무료 평가판의 경우 105초의 시간이 주어집니다. 동영상 1개당 4초를 소비하므로 4초짜리 동영상을 총 26개 생성할 수 있습니다. 동영상 생성 시간은 기본적으로 4초이나 Extend 버튼을 클릭하여 16초 길이까지 생성할 수도 있으니 이 점도 함께 참고하기 바랍니다. 마지막으로 다양한 프롬프트 작성을 위한 언어들이 지원되나, 영어로 프롬프트를 작성하는 것을 추천합니다.