드림무빙 DreaMoving│알리바바 춤추는 동영상 생성 기술

알리바바의 드림무빙(DreaMoving)은 실사든 그림이든 관계없이 사람의 얼굴 이미지를 입력하고, 포즈 시퀀스, 의상, 배경 정보를 추가하면 이를 기초로 동영상을 생성하는 AI 기술입니다. 이번 포스팅에서는 허깅페이스(드림무빙 허깅페이스 바로가기 클릭!)에서 드림무빙을 실제 테스트해 볼 수 있는 방법을 정리하여 공유합니다. 생성하는 방법은 매우 직관적이며, 심플하기 때문에 누구나 쉽게 테스트해 볼 수 있습니다. 본격적인 사용법을 설명하기 전에 실제로 생성한 동영상들의 편집 영상을 간단히 살펴본 후, 생성방법을 단계별로 설명하며, 간단한 사용후기로 표스팅을 정리하겠습니다. 

춤추는 피팅 모델 체험 데모 파일 사용 방법│outfit-anyone│magic animate

 

1. 드림무빙 │춤추는 영상 모음 

먼저 드림무빙(DreaMoving)을 이용하여 생성한 동영상들의 편집 영상입니다. 디테일이 살짝 아쉽기는 합니다만, 그럭저럭 재미있게 테스트해 볼 수 있습니다. 깃허브 페이지(드림무빙 깃허브 페이지 바로가기 클릭!)에 논문 요약과 다양한 동영상, 프롬프트가 공개되어 있으니 이 점도 참고하시기 바랍니다. 

드림무빙(DreaMoving) │생성결과 편집영상 

 

2. 드림무빙 적용 방법과 순서 

위의 바로가기 링크를 이용하거나 혹은 아래 그림을 클릭하면 바로 허깅페이스 페이지로 이동합니다. 먼저 ① 동영상 인물의 얼굴 사진을 업로드합니다. ②의 Text to Video를 클릭한 후, ③을 클릭하여 준비된 프롬프트 중 하나를 선택하고, Generate를 클릭합니다. 동영상 생성은 5분 정도가 소요된다고 공지되어 있으나, 실제 해보면 편차가 제법 커서 대기시간이 길어져 많은 인내심이 필요할 수도 있습니다.  생성된 결과는 아래 그림처럼 ④ Result에 나타나며, 앞서 편집 영상에서 살펴본 동영상들입니다. 

드림무빙 적용 방법과 순서

 

3. 정리

작년말에 알리바바가 공개한 드림무빙은 사용법이 매우 심플하고, 직관적이라 누구라도 쉽게 사용해 볼 수 있습니다. 앞서 살펴본 바와 같이 얼굴 이미지만 있다면, 다양한 동영상을 생성해 볼 수 있습니다. 다만, 생성 결과의 일관성이나 디테일이 살짝 아쉽기는 했습니다만, 요즘 같은 기술개발 속도라면 조만간 개선된 결과를 공개하지 않을까 싶습니다. 추후 관련 업데이트 소식이 있다면 정리하여 다시 한번 공유하겠습니다.