Viggle, 등장인물 교체용 영상 에이전트 Remake의 가중치 공개
Viggle AI가 이미 촬영된 영상을 재가공하는 에이전트 Viggle Remake를 출시했다. 이 에이전트는 장면에 등장하는 모든 인물을 교체하고, 사물과 배경을 바꾸고, 화면을 다른 스타일로 재스타일링하며, 길이가 최대 2분인 영상에 시각 효과를 추가한다. 동시에 회사는 모델 가중치를 공개해, 클라우드 서비스뿐 아니라 모델 자체도 이용할 수 있다.
클라우드의 최저 가격은 720p 해상도 영상 10초당 0.96달러다. 이 요금으로 1분은 약 5.76달러, 최대 길이인 2분 영상은 약 11.52달러가 든다. Viggle AI는 이것이 Higgsfield Genjutsu 가격의 절반에도 못 미친다고 주장한다.
에이전트의 기능
발표 내용으로 보면 Remake는 촬영 소재를 재가공하는 전형적인 작업을 겨냥하고 있다.
- 장면 내 모든 인물 교체. 회사는 새 인물이 편집 컷 사이에서 일관성을 유지한다고 약속한다. 롱숏과 클로즈업을 이어 붙인 대화 장면에서는 이것이 핵심 조건이다. 그렇지 않으면 인물이 컷마다 달라진다.
- 사물과 배경 교체. 화면 속 물건을 바꾸거나 상황을 다른 장소로 옮길 수 있다.
- 재스타일링과 VFX. 영상을 다른 시각적 스타일로 바꾸거나 효과를 더할 수 있다.
- 대화를 통한 다듬기. 특정 컷이 원하는 대로 나올 때까지 에이전트에게 계속 메시지를 보낼 수 있다.
마지막 항목을 회사는 이렇게 표현한다.
“원하는 대로 될 때까지 에이전트와 계속 대화하며 어떤 컷이든 고치세요”.
— Viggle AI
기존 Viggle 도구와 무엇이 다른가
Viggle에는 이미 좁은 과제를 맡는 별도의 애니메이션 도구가 있다. Mix는 한 인물의 이미지를 움직임이 있는 영상에 “섞어 넣고”, Multi는 여러 인물을 한꺼번에 같은 방식으로 처리하며, Motion Control은 영상에서 가져온 움직임으로 정지 이미지를 살아 움직이게 한다. 이들은 크레딧 방식으로 작동하고, 1크레딧이 애니메이션 15초를 처리한다.
이 도구들로 이미 시리즈 콘텐츠가 만들어졌다. Viggle 블로그에 따르면 제작자 Mr. WAS는 5부작 시리즈를 만들면서 가장 중요한 컷, 즉 대화 장면의 클로즈업에 Mix를 사용했다. 음식과 야외 로케이션이 담긴 컷은 Runway Gen 2에서 만들었다. 이런 작업 과정은 여러 서비스에서 나온 소재를 조합해야 함을 뜻했다. 설명대로라면 Remake는 인물·물건·배경·스타일 교체를 하나의 도구로 묶고, 편집 컷이 포함된 최대 2분 길이의 장면을 입력으로 받는다.
Genjutsu와의 비교는 얼마나 타당한가
Higgsfield Genjutsu는 비슷한 과제를 해결한다. 재촬영 없이 클립의 일부를 다시 구성하는 것이다. 모드는 두 가지다. Motion Transfer는 영상에서 움직임을 가져와 그것을 중심으로 새로운 장면을 만든다. Object Swap은 지정한 요소를 교체하고 나머지 화면은 그대로 둔다. Higgsfield 가이드에 설명된 대로, 이 서비스는 한 번의 생성에 최대 30초 길이의 영상과 최대 30장의 참조 사진을 받고 결과물을 최대 1080p 해상도로 내놓는다. 프롬프트는 필수가 아니며 프리셋으로도 작업할 수 있다. 경량 버전 Genjutsu Lite도 있는데 역시 최대 30초, 720p 또는 1080p를 지원한다.
길이에서는 Remake가 네 배 앞선다. 생성 1회당 2분 대 30초다. 가격은 더 복잡하다. Viggle은 720p에 대한 비용만 제시했고, Genjutsu는 1080p도 내놓는다. 회사는 더 높은 해상도에 대한 Remake 요금을 밝히지 않았으므로, Genjutsu 가격의 절반에도 못 미친다는 주장은 720p로 동등하게 출력하는 경우에 대해서만 검증할 의미가 있다.
아직 알려지지 않은 것
공개 가중치는 게시물의 링크에서 받을 수 있고, 클라우드 버전은 여기에서 실행한다. 발표에는 모델을 자체 환경에 설치하려는 스튜디오에 가장 중요한 내용, 즉 가중치의 라이선스, 상업적 이용 조건, 그래픽카드 요구 사항이 빠져 있다. 에이전트가 컷 사이에서 인물을 어떻게 유지하는지, 그 메커니즘이 어디서 무너지는지도 공개되지 않았다.
우리 판단으로는 이 답변들에 따라 Remake가 실제로 누구에게 유용할지가 달라진다. 짧은 영상이나 소셜 미디어 콘텐츠를 만드는 사람에게는 초 단위 과금의 클라우드로 충분할 것이다. 고객의 소재를 외부 서비스로 보낼 수 없는 포스트프로덕션 스튜디오와 VFX 팀에게는 로컬 실행이 가능하다는 점에서 공개 가중치가 매력적이다. 라이선스가 알려지지 않은 동안에는 이 모델을 상업적 파이프라인에 넣는 것은 위험하다. 인물 교체 오류가 가장 잘 드러나는 1080p 이상 클로즈업에서의 품질 문제도 여전히 미해결이다.
Viggle이 Remake의 가중치를 공개한 이유는 무엇일까. 오픈 경쟁자들의 압박, 개발자 커뮤니티에 대한 베팅, 시장 점유율 싸움?