위키원
무비 젠
무비 젠(Movie Gen)은 2024년 10월 4일 메타(Meta)가 공개한 동영상 생성 인공지능 모델이다.
 .jpg) |
개요[편집]
무비 젠은 메타가 개발한 인공지능 기반 영상 및 오디오 생성 도구로, 텍스트 프롬프트를 통해 개인화된 고화질 영상과 오디오를 자동으로 제작할 수 있는 강력한 기능을 제공한다. 이 도구는 영상 생성뿐만 아니라 고급 편집 기능을 포함하고 있으며, 할리우드 영화 제작자부터 일반 사용자까지 폭넓게 사용할 수 있는 편리한 인터페이스를 자랑한다. 주요 기능은 비디오 생성, 비디오 편집, 오디오 생성, 개인화된 비디오 등이다. 단순한 비디오 제작 도구를 넘어, 영상 제작의 새로운 패러다임을 제시하며 미래의 몰입형 스토리텔링의 핵심 도구로 자리매김할 가능성을 갖추고 있다.
주요 기능[편집]
- 비디오 생성 기능: 무비 젠의 비디오 생성 기능은 텍스트 프롬프트만으로 최대 1080p 해상도의 사실적인 비디오를 자동으로 만들어낸다. 이 시스템은 300억 개의 매개변수를 갖춘 트랜스포머 모델을 사용하여 최대 16초 길이의 영상을 생성할 수 있으며, 이는 16프레임(fps) 속도로 재생된다. 또한, 카메라 모션, 객체 상호작용, 환경 물리학 등 복잡한 비디오 생성의 측면을 AI가 자동으로 처리하여 높은 품질의 영상을 제공한다.
- 개인화된 비디오 생성: 무비 젠은 사용자가 자신의 이미지나 다른 사람의 이미지를 업로드하여 개인화된 비디오를 생성할 수 있다. 예를 들어, 사용자가 자신의 이미지를 입력하고 특정 상황을 설정하면, 그 이미지를 기반으로 한 맞춤형 콘텐츠가 생성된다. 마크 저커버그(Mark Zuckerberg)는 무비 젠을 사용해 운동하는 자신의 모습을 네온 사이버펑크, 고대 로마, 불타는 황금 버전으로 재구성한 비디오를 공개한 바 있다.
- 정밀한 비디오 편집: 무비 젠의 비디오 편집 기능은 비디오 내 특정 객체나 색상을 부분적으로 수정할 수 있는 고급 도구를 제공한다. 사용자는 텍스트 명령을 통해 배경을 교체하거나, 특정 요소를 추가 및 제거할 수 있다. 예를 들어, 원본 비디오에서 푸들이 나무 막대기를 가지고 노는 장면에 푸들에게 핑크색 옷을 입히거나 배경을 추가하는 것이 가능하다. 이러한 편집은 원본 비디오를 보존한 채로 이루어지며, 기존의 복잡한 편집 도구에 비해 훨씬 직관적이다.[1]
- 오디오 생성 및 동기화: 무비 젠은 비디오에 맞춘 오디오 생성 기능도 제공한다. 최대 45초 길이의 동영상 콘텐츠에 동기화된 오디오를 자동으로 생성할 수 있으며, 이를 통해 영상의 배경음악이나 효과음을 손쉽게 추가할 수 있다. 예를 들어, 불꽃놀이 장면에는 불꽃이 터지는 소리를, 비오는 장면에는 빗소리를 삽입할 수 있다.[2][3]
기술적 기반[편집]
무비 젠의 핵심 기술은 확산 모델(Diffusion Model)과 대형언어모델(LLM), 그리고 플로우 매칭(Flow Matching)이라는 새로운 기술을 결합하여 개발되었다. 플로우 매칭은 데이터 분포의 변화를 시간 경과에 따라 모델링하며, 이를 통해 비디오의 다음 장면을 예측하고 자연스러운 동작을 만들어낸다. 이 기술은 비디오 생성에서 다음 장면의 물리적 이동을 자연스럽게 연결해 고품질의 영상을 제공한다.
또한, 메타는 무비 젠의 개발에 앞서 수년간의 연구 경험을 바탕으로 했다. 2022년에 공개된 메이크 어 신(Make-A-Scene)과 메이크 어 비디오(Make-A-Video) 등 초기 모델들의 성공을 통해 얻은 노하우가 이번 제품에 반영되었다. 이 연구 과정에서 메타는 수십억 개의 비디오 및 이미지 데이터를 사용해 AI 모델을 훈련시켰으며, 특히 영상 데이터에서 물리적 세계의 현실성을 학습했다.[3]
특징[편집]
무비 젠은 영상 제작을 위한 가장 강력한 도구 중 하나로 평가받고 있다. 기존의 비디오 생성 AI들과 달리 편집 기능을 갖추고 있으며, 사용자가 비디오 내 이미지를 자신의 사진으로 교체하거나 새로운 요소를 추가할 수 있다는 점에서 차별화된다. 이러한 개인화된 비디오 생성은 특히 할리우드와 같은 전문 영상 제작 환경에서 유용하게 사용될 수 있다. 일반 사용자들도 무비 젠을 통해 손쉽게 개인 맞춤형 영상을 제작할 수 있으며, 이를 통해 예술적 창의성과 상상력을 발휘할 수 있다. 예를 들어, 단순한 달리기 영상에 배경을 사막으로 바꾸거나 비 오는 날씨를 맑은 날씨로 변경하는 등의 다양한 편집이 가능하다.
또한, 메타의 플랫폼과의 통합을 통해 무비 젠은 더욱 강력한 사용자 경험을 제공할 예정이다. 인스타그램, 왓츠앱, 메신저 등 메타의 소셜 미디어 앱에 무비 젠이 탑재되면, 사용자는 자신만의 독특한 숏폼 비디오를 제작하거나 메시지에 애니메이션을 추가하는 등의 다양한 활용이 가능해진다. 예를 들어, 왓츠앱으로 보내는 생일 축하 메시지를 애니메이션으로 제작하거나, 인스타그램 릴스(Reels)에 업로드할 영상을 무비 젠을 통해 편집할 수 있다.[4]
해결 과제[편집]
무비 젠은 여전히 일부 해결해야 할 과제들이 남아 있다. 메타의 생성 AI 부사장 코너 헤이즈는 "현재 비디오를 생성하는 데 약 10분 이상이 소요된다"고 밝혔으며, 이는 일반 소비자가 모바일 환경에서 사용하기에는 시간이 다소 길다는 문제점이 있다. 이에 메타는 비디오 생성 속도를 개선하고, 더 많은 사용자들이 무비 젠을 원활하게 사용할 수 있도록 최적화 작업을 진행 중이다.
또한, 딥페이크와 같은 기술적 위험성을 방지하기 위해 무비 젠은 선정적이거나 폭력적인 콘텐츠를 생성하지 못하도록 엄격한 안전 장치를 마련하고 있다. 메타는 이 문제를 해결하기 위한 기술적 개선 작업에 집중하고 있으며, 책임감 있는 AI 사용을 보장하는 것을 목표로 하고 있다.[3]
비교[편집]
메타의 무비 젠과 오픈AI의 소라(Sora)는 각각 비디오 생성 AI 기술의 최첨단을 이끄는 도구이지만, 서로 다른 강점을 지니고 있다. 무비 젠은 개인화된 비디오 생성과 고급 편집 기능에 초점을 맞추고 있다. 사용자는 텍스트 프롬프트만으로 자신이나 다른 사람의 이미지를 포함한 고해상도의 영상을 생성할 수 있으며, 비디오 일부만 수정하거나 특정 요소를 변경하는 등 세밀한 편집이 가능하다. 이 외에도 48kHz 오디오를 생성하여 영상과의 동기화를 지원한다는 점에서 몰입감 있는 콘텐츠 제작이 특징이다. 또한 메타의 플랫폼과 통합되어 인스타그램이나 왓츠앱 등의 소셜 미디어에서 쉽게 사용할 수 있도록 설계되었다.
반면, 오픈AI의 소라는 정교한 움직임 표현과 다양한 스타일 적용에 강점을 두고 있다. 소라는 비디오 생성 시, 복잡한 객체 간의 상호작용을 자연스럽게 구현하며, 고해상도 영상 제작에 탁월하다. 사용자는 텍스트 기반의 프롬프트로 다양한 스타일과 비주얼을 적용할 수 있어, 창의적인 영상 제작에 적합하다. 그러나 무비 젠에 비해 개인화된 콘텐츠 생성 기능이나 오디오 동기화 기능은 제한적이다.
결과적으로, 무비 젠은 사용자 맞춤형 콘텐츠 제작과 실용적인 편집 기능에 초점을 맞춘 반면, 소라는 스타일과 움직임의 정교함을 중요시하여 창작자의 창의적인 비디오 제작을 지원하는 데 중점을 둔다.
각주[편집]
- ↑ 이덕주 기자, 〈텍스트 입력하면 동영상 '척' 메타, 생성형AI 무비젠 공개〉, 《매일경제》, 2024-10-06
- ↑ 전미준 기자, 〈메타, 텍스트로 고품질 영상 만드는 AI 도구 '무비젠' 공개...AI가 생성한 배경음악과 소리 효과까지〉, 《인공지능신문》, 2024-10-06
- ↑ 3.0 3.1 3.2 임대준 기자, 〈메타, 강력한 동영상 생성 AI '무비 젠' 공개..."오픈 소스 공개 대신 인스타그램에 통합"〉, 《AI타임스》, 2024-10-05
- ↑ 황치규 기자, 〈메타, 새 비디오·오디오 생성AI 툴 '무비 젠' 공개...내년 자사 SNS에 통합〉, 《디지털투데이》, 2024-10-05
참고자료[편집]
- 임대준 기자, 〈메타, 강력한 동영상 생성 AI '무비 젠' 공개..."오픈 소스 공개 대신 인스타그램에 통합"〉, 《AI타임스》, 2024-10-05
- 황치규 기자, 〈메타, 새 비디오·오디오 생성AI 툴 '무비 젠' 공개...내년 자사 SNS에 통합〉, 《디지털투데이》, 2024-10-05
- 전미준 기자, 〈메타, 텍스트로 고품질 영상 만드는 AI 도구 '무비젠' 공개...AI가 생성한 배경음악과 소리 효과까지〉, 《인공지능신문》, 2024-10-06
- 이덕주 기자, 〈텍스트 입력하면 동영상 '척' 메타, 생성형AI 무비젠 공개〉, 《매일경제》, 2024-10-06
같이 보기[편집]
