Pix2Pix Video │텍스트로 동영상 수정 변환 방법│Video to Video

이번 포스팅에서 정리하여 공유할 내용은 Sylvain Filoni의 Pix2Pix Video입니다. 동영상 자체를 다른 동영상으로 변환 생성(Video to Video)하는 방법으로서 Domo AI와 같이 실사 영상을 애니메이션 영상으로 변환, 생성하는 AI 서비스가 대표적인 사례 중 하나입니다. 픽스투픽스 비디오(Pix2Pix Video 허깅페이스 페이지 바로가기 클릭!) 역시 이와 유사한 AI 서비스입니다만, 좀 더 유연한 방법으로서 기존 동영상의 변환 및 생성을 프롬프트 입력만으로 간단히 처리할 수 있습니다. 사용법 역시 매우 심플하고 직관적이라 허깅페이스 페이지에서 간단히 테스트해 볼 수 있으니 관심 있는 분들은 아래 내용을 참고하여 이용해 보시기 바랍니다. 

AI 동영상 얼굴 바꾸기 │비디오 페이스 스왑 │Vidnoz AI (6)

불멍 비디오를 무료로 만드는 방법 │Enhancer│vidnoz 사용법 (2)

AI 이미지를 음악으로 생성하는 방법 │AI Image to Music Generator

AI 비디오 인핸서 온라인 │비디오 영상 품질 개선 방법│브이메이크 에이아이 (Vmake. AI)

동영상 인물 얼굴 바꾸기 │Video Face Swap│Remaker. AI 신기능 업데이트 소식

 

1. 생성 결과 전후 동영상 비교

본격적인 사용 방법을 살펴보기 전에 생성 결과 전후 동영상을 비교해보겠습니다. 첫 번째 동영상은 석양이 지는 바다 영상인데요 Pix2Pix Video를 통해 변환 및 생성한 동영상입니다.

Pix2Pix Video 동영상 변환 결과 

아래 동영상이 원본입니다. 뒤에서 설명하겠습니다만, 원본 동영상에 "sunset" 이라는 텍스트만 입력하여 위와 같은 저녁노을이 지는 파도치는 바다의 모습을 변환하여 생성할 수 있습니다. 

Pix2Pix Video 변환 이전 원본 동영상 

 

2. Pix2Pix Video 적용 순서

앞서 언급한 바와 같이 Pix2Pix Video를 허깅페이스에서 직접 사용해 볼 수 있는데요. 먼저 위의 바로가기 링크 혹은 아래 캡처 이미지를 클릭하여 허깅페이스 페이지로 이동합니다.  그럼 아래 캡처 이미지와 같은 웹페이지가 나타나고, 캡처 이미지의 번호 순서대로 따라 하면 됩니다. 먼저 ① 원본 동영상을 업로드합니다. ② 원본 동영상에 원하는 효과를 생성하기 위한 프롬프트를 키워드 중심으로 간단히 입력합니다.  그리고 ③ Generate를 클릭하면, 잠시 후 ④에 변환 생성된 동영상 결과가 나타나며, 다운로드 아이콘을 클릭하여 내려받을 수 있습니다. 

Pix2Pix-Video 허깅페이스

가령, 아래 캡처 이미지와 같이 앞서 살펴본 ① 동영상을 업로드하고, ②와 같이 "sunset" 이라는 프롬프트를 입력한 후, ③ Generate를 클릭하면, ④와 같이 석양이 지는 바다 영상으로 변환 및 생성된 결과를 확인할 수 있습니다. 

Pix2Pix-Video 허깅페이스 예제 적용 순서

이번 포스팅에서 소개하지는 않았습니다만, 실사 동영상을 업로드한 후, "Turn into Anime" 를 프롬프트로 입력하면, 기존 실사 영상을 애니메이션 영상으로 변환할 수도 있습니다. 다만, Pix2Pix Video를 이용하기 전 몇 가지 참고 사항을 덧붙이면, 첫째 프롬프트는 간단히 입력하는 것이 좋습니다. 둘째 동영상 변환 생성 시간이 오래 걸릴 수도 있어 때로는 인내심이 필요한 경우도 있습니다. 그래도 별도 로그인 없이도 무료로 가볍게 즐길 수 있다는 점은 큰 장점이지 않나 싶습니다.