동일한 이미지가 다른 장면에 나타날 수 있습니다! 빅 비디오 모델 vidu가 대규모 업데이트를 환영합니다.
2024-09-15
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
9월 11일, shengshu technology와 tsinghua university가 공동 개발한 자체 개발한 원본 비디오 모델인 vidu는 "주제 일관성" 기능을 갖춘 주요 업데이트를 발표했습니다. 이 기능은 모든 주제의 일관된 생성을 달성하여 비디오 생성을 가능하게 합니다. 더 안정적이고 제어 가능합니다. 이 기능은 현재 사용자에게 무료로 제공됩니다.
역할 일관성 문제를 해결하기 위해 주제 참조 기능이 온라인으로 출시되었습니다.
현재 빈센트 사진 기능이든 빈센트 비디오 기능이든 널리 비판받는 문제는 사진이나 영상 속 이미지의 주제 일관성이다. 동일한 프롬프트 단어와 동일한 대형 모델이 두 번 생성되고 생성된 내용이 다릅니다. 이는 예술 작품에서 주인공의 이미지가 불일치하게 되는 원인이기도 하며 ai 생성의 가장 큰 차이점 중 하나가 되었습니다. 작품과 인간.
이 문제를 해결하기 위해 업계에서는 midjourney와 같은 ai 그리기 도구를 사용하여 분할 사진을 생성하고 먼저 사진에서 피사체를 일관되게 유지하는 "먼저 ai가 사진을 생성한 다음 사진이 비디오를 생성하는" 방법을 채택하려고 노력해 왔습니다. 레벨을 지정한 다음 이 사진을 비디오 클립으로 변환하고 편집합니다.
하지만 문제는 ai 드로잉의 일관성이 완벽하지 않아 반복적인 수정과 부분적인 재드로잉을 통해 해결해야 하는 경우가 많다는 점이다. 더 중요한 것은 실제 영상 제작 과정에는 많은 장면과 렌즈가 포함된다는 점입니다. 이 방법으로 다중 구성 요소 렌즈 장면을 처리할 경우 드로잉 작업량이 엄청나며 이는 전체 과정의 절반 이상을 차지할 수 있으며 최종 영상 콘텐츠도 그만큼 늘어나게 됩니다. 또한 분할 샷에 대한 과도한 의존으로 인해 창의성과 유연성이 부족합니다.
9월 11일 shengshu technology가 개최한 미디어 오픈 데이 행사에서 shengshu technology는 "주제 참조" 기능을 시연했습니다. 이 기능을 사용하면 사용자가 모든 주제의 사진을 업로드할 수 있으며 vidu는 주제의 이미지를 잠그고 you를 통해 설명할 수 있습니다. 장면을 임의로 전환하여 동일한 피사체의 영상을 출력할 수 있습니다.
이 기능은 단일 개체에 국한되지 않고 "모든 주제"를 지향합니다. 그것이 사람, 동물, 상품, 애니메이션 캐릭터, 허구의 주제이든 간에 비디오 생성에 있어 일관성과 제어성을 보장할 수 있습니다. video 세대 분야의 주요 혁신. vidu는 또한 이 기능을 지원하는 세계 최초의 대형 비디오 모델입니다.
예를 들어, 캐릭터에 "주제 참조"를 사용할 때 vidu는 실제 사람이든 가상의 인물이든 상관없이 다양한 환경과 렌즈에서 이미지를 일관되게 유지할 수 있습니다. rushengshu technology의 회장 겸 ceo인 tang jiayu는 chen xiaoxu가 연기한 lin daiyu의 이미지를 다양한 장면과 다양한 의상으로 제공함으로써 "lin daiyu가 커피를 마시는" 장면을 현장에서 보여주었습니다. 같은 린 다이유".
shengshu technology의 회장 겸 ceo인 tang jiayu는 현장에서 '주제 참조' 기능을 시연했습니다. 사진: 베이징 뉴스 shell finance 기자 luo yidan
ai 영상 제작의 일관성은 완전한 ai 내러티브 시대를 크게 향상시킬 것입니다.
이 기능을 바탕으로 중국 중앙라디오tv국장이자 aigc 아티스트인 shi yuxiang(senhai fluorescent)은 애니메이션 단편 영화 '여름 선물'을 제작하면서 창작 과정을 공유하면서 기본 tusheng 비디오 기능과 비교하여 다음과 같이 말했습니다. "주제 참조" 기능은 정적인 사진의 제약을 없애고 생성된 사진이 더욱 매력적이고 자유롭기 때문에 창작의 일관성이 크게 향상됩니다. 동시에, 사진 제작 작업량을 약 70% 절감해 효율성을 대폭 향상시켰고, 사진 소재 제작보다 스토리 내용을 다듬는 데 더 집중할 수 있게 됐다. 동시에 일관성은 사후 편집을 더 쉽게 만듭니다.
중국 중앙라디오tv 국장이자 aigc 아티스트인 시 위샹(shi yuxiang)이 '주제 참조' 기능을 통해 제작한 애니메이션을 현장에서 시연한 것은 애니메이션 속 주인공의 이미지가 안정적으로 유지되는 것을 볼 수 있다. 사진: 베이징 뉴스 shell finance 기자 luo yidan
tang jiayu는 '주제 참조'라는 새로운 기능의 출시는 완전한 ai 내러티브의 시작을 의미하며 ai 영상 제작 역시 보다 효율적이고 유연한 단계로 나아갈 것이라고 말했습니다. 단편 비디오, 애니메이션, 광고 등을 제작하든 내러티브 기술에서 완전한 내러티브 시스템은 "일관된 주제, 일관된 장면, 일관된 스타일"과 같은 요소의 유기적인 조합입니다.
따라서 비디오 모델이 내러티브 무결성을 달성하려면 이러한 핵심 요소를 완전히 제어할 수 있어야 합니다. "본문 참조" 기능은 vidu의 일관성을 향한 중요한 단계이지만 이는 시작에 불과합니다. 앞으로도 vidu는 더 높은 수준의 내러티브 요구 사항을 충족하기 위해 다중 주제 상호 작용, 통일된 스타일, 변화하는 장면의 안정적인 전환과 같은 복잡한 요소를 정확하게 제어하는 방법을 지속적으로 탐구할 것입니다.
그는 장기적인 관점에서 포괄적인 제어 가능성이 달성되면 영상 제작 산업이 파괴적인 변화를 겪게 될 것이라고 말했습니다. 그때쯤이면 캐릭터, 장면, 스타일은 물론 렌즈 사용, 조명 및 그림자 효과와 같은 요소까지 유연하게 조정 가능한 매개변수로 변환됩니다. 사용자는 손가락을 움직이고 매개변수를 조정하기만 하면 이미지 작품이 완성되며, 각 작품 뒤에는 ai를 기반으로 한 사용자 고유의 세계관과 자기 표현이 있을 것입니다.
베이징 뉴스 shell finance 기자 luo yidan 편집자 wang jinyu yang li 교정
