2024-08-19
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
텍스트/텐센트 테크놀로지 저우샤오옌
새로운 것을 하나 말씀드리자면, 앞으로 여러분이 보게 될 단편 드라마에는 무대 앞부터 무대 뒤까지 '사람'이 없을 수도 있다는 것입니다.
기존 모델에서는 단편 드라마의 대본 개발부터 제작, 배급까지 '사람'으로 가득 찬 제작 과정이 이제는 AI의 등장으로 인해 한 사람만 있어도 가능해졌습니다. 감독은 모든 과정을 완료할 수 있습니다.
8월 19일 Kunlun Wanwei는 비디오 대형 모델과 3D 대형 모델을 통합한 세계 최초의 AI 단편 드라마 플랫폼인 SkyReels를 출시했습니다. SkyReels 플랫폼은 스크립트 생성, 캐릭터 커스터마이징, 스토리보드, 플롯, 대화/BGM 및 비디오 합성을 통합하여 제작자가 "원 클릭으로 드라마를 만들고" 고품질 AI 비디오를 쉽게 제작할 수 있도록 합니다. Kunlun Wanwei AI 단편 드라마 플랫폼 SkyReels의 출시는 글로벌 AI 단편 드라마 제작에 있어 중요한 기술적 도약을 의미합니다.
즉, 배우를 고용하거나 공연장을 찾을 필요 없이 스카이릴을 열고 키보드를 조작하는 것만으로 AI의 힘을 활용해 단편극을 만들 수 있다.
AI가 촌극을 선보이고 '무인의 땅'에 들어가기 시작합니다.
단편극을 하기 위해 해외로 나가는 것은 새로운 일이 아니다.
2022년에는 중국 온라인의 단편 드라마 상품인 ReelShort가 출시되었고, 1년 후 미국 iOS 엔터테인먼트 목록에서 무료 1위를 차지했습니다. 이후 ShortTV, DramaBox 등 떠오르는 스타들도 히트 단편 드라마를 계속해서 제작했습니다. 그들의 주제는 주로 상사, 사랑, 늑대인간입니다. ReelShort의 인기 단편 드라마 "억만장자 남편의 이중생활"에는 "미녀를 구하는 영웅들", "재산 싸움" 등이 포함됩니다.
이러한 유형의 단편 드라마는 일반적으로 현지 원작입니다. 즉, 해외 팀은 현지 문화와 사용자 관심을 결합하여 현지 사용자의 미적 취향에 맞는 대본을 만들어야 하며 현지 사람들을 '매력적'으로 만드는 줄거리를 정확하게 포착할 수 있습니다.
이들 단편극의 핵심 문제는 현지 문화에 대한 충분한 이해와 연구가 필요하고, 제작 주기가 길고, 현지 배우를 찾는데 일정 비용이 소요된다는 점이다.
사실 초기 해외 단편 드라마 모델은 대개 중국 현지 드라마에 직접 자막을 붙인 뒤 현지에서 방송해 이질감을 줄이기 위해 AI를 사용해 배우들과 대화하는 경우가 많다. 단편 드라마에서는 '중국 얼굴을 가진 배우가 영어로 대사를 하는 것'처럼 보이도록 형상을 최적화했지만, 일부 시청자들은 여전히 중국에서 유럽이나 미국의 영화나 TV 시리즈를 볼 때처럼 뻣뻣하다고 느끼곤 한다. 파란 눈과 녹색 머리를 가진 유럽과 미국 배우들을 보면 사람들이 이상한 어조로 중국어를 말하는 것처럼 관객이 진정한 몰입감을 느끼기 어렵습니다.
이에 따라 일부 해외 팀에서는 AI를 활용해 단편극 배우들의 '얼굴을 바꿔' 현지인들에게 더 많은 수용을 받을 예정이다.
과거에는 인기 있는 단편 드라마를 만들기 위해 해외 팀들이 다양한 '트릭'을 고안해 두뇌 CPU를 많이 소모했다는 것을 알 수 있다.
그렇다면 빅모델 시대에 문화적 차이를 깨고, 언어의 제약에서 벗어나 AI를 활용해 모든 면을 해결할 수 있는 단편 드라마 상품이 있을까?
ReelShort가 바다로 떠난 해와 같은 해에 Kunlun Wanwei가 이를 주목했습니다.AIGC체계적 기회 모바일 인터넷 시대의 성공 모델을 검토하면서 우리는 그 암호가 "free + To C" 모델에 있다는 것을 발견했습니다. 그리고 여전히 건재한 "거대" 기업을 관찰하면 이를 발견할 수 있습니다. 그들 중 다수는 특정 종족이 궁극기를 달성했을 것입니다. 이 판단을 바탕으로 Kunlun Wanwei의 회장 겸 CEO인 Fang Han은 이러한 논리에 따라 AIGC 시장을 공격할 수 있습니다.
Kunlun Wanwei는 “AI”에 대해 생각했습니다. 사용자 인터페이스"전략은 온라인 기사, 단편극, 애니메이션, 음악 등 세분화된 트랙에서 유니콘 초상화를 탐색하는 등 C 측의 고주파 시나리오부터 시작합니다. 그중에서도 단편극도 Kunlun Wanwei에게 중요한 옵션이 되었습니다. 그들은 기존의 단편드라마 제작 모델을 전복하는 새로운 종을 만들고 싶다.
AI 단편 드라마 플랫폼 스카이릴스(SkyReels)도 이런 논리로 탄생했다. 대본 생성부터 캐릭터 생성, 숏 융합까지 AI가 처리하는 원스톱 단편 드라마 영상 제작 플랫폼이다. 생성되었습니다.
전반적으로 SkyReels는 감독의 AI 에이전트처럼 작동하여 간단한 아이디어를 짧은 연극으로 바꿔줍니다.
~에 의해소라로 대표되는 AI 영상세대 모델이 등장한 이후, 국내외 많은 플레이어들이 Pixverse,빠르고 쉽게, Zhiying Qingyuan 및 이러한 대형 모델을 사용하여 영화 및 TV 작품을 제작하는 신흥 감독도 많이 있습니다. 이러한 모델을 사용하면 좋은 비디오 생성 효과를 얻을 수 있지만 성숙한 영화를 만들고 싶다면 사용자의 전문적인 능력에 대한 특정 요구 사항이 여전히 필요합니다. 높은 시나리오 작성 능력과 예술적 미적 능력이 필요합니다.
예를 들어 사용자는 미리 장면을 구성하고 원하는 장면을 상상한 다음 전문 용어가 포함된 프롬프트를 사용해야 합니다.중간 여행제품에서 만족스러운 사진을 디버깅한 후 이를 비디오 생성 제품으로 가져와서 렌즈 조정을 하고 마지막으로 작업물을 내보냅니다.
이러한 도구는 영화 및 TV 작품의 제작 체인을 크게 단축시켰지만 더 지향적입니다.푸에르토리코그룹 및 SkyReels는 사용 임계값이 낮습니다. 전체 작업 프로세스는 간단하고 지능적이며 나머지는 AI에 맡길 수 있습니다.이에 비해 SkyReels는 세계 최초의 AI 단편 드라마 플랫폼으로 더 많은 시청자를 확보한 UGC 제품입니다.
(스카이릴즈 제품 시연)
SkyReels는 3D 엔진과 생성 AI를 혼합한 세계 최초의 비디오 제작 플랫폼입니다. 단편 영화 제작을 선택한 후, 창의적인 아이디어를 입력하고 애니메이션 스타일, 사실주의 등 원하는 비디오 스타일을 선택하세요. , Ghibli 스타일 잠깐, 한 번의 클릭으로 스크립트를 생성할 수 있습니다. 시스템은 스크립트와 스토리의 필요에 따라 자동으로 캐릭터를 생성합니다. 그러면 사용자는 자동으로 생성된 스토리보드 스크립트를 보고 한 번의 클릭으로 비디오로 변환할 수 있으며, 콘텐츠는 자동으로 변환됩니다.1080P 60프레임HD 비디오;비디오 길이는 한 번에 최대 180초까지 생성할 수 있습니다., 한 번에 60초 분량의 동영상을 생성할 수 있는 소라(Sora), 한 번에 10초 분량의 동영상을 생성할 수 있는 켈링(Keling)과 비교하면 획기적인 발전이다.
전반적으로 단편 드라마의 전체 제작 체인에는 대본 생성, 캐릭터 맞춤화, 스토리보드 생성, 에피소드 촬영 및 후반 작업이 포함되며 SkyReels는 자체 개발한 세 가지 대형 모델을 통해 이 제작 체인의 효율성을 향상시킬 수 있습니다.
콘텐츠 개발 과정에서는 전통적인 단편드라마 제작 방식,기성 온라인 소설에서 일부 장을 골라 단편극의 특성에 맞게 각색하는 작가는 관객의 관심을 결합하고 줄거리의 전환점을 능숙하게 설정할 수 있어야 한다. 다음 장에 대한 비용을 지불하려는 사용자의 의지.
SkyReels는 이 링크에서 자체 개발한 스크립트 대형 모델을 사용합니다.스카이스크립트, 전통적인 단편극의 수동 콘텐츠 개발을 대체합니다. Kunlun Wanwei는 처음으로 1억 레벨의 고품질 단편 드라마 구조 데이터 세트인 SkyScript-100M을 구축했습니다. 이 데이터 세트에는 수많은 멋진 단편 드라마의 줄거리 리듬, 흥미진진한 포인트 및 감정 변화에 대한 고품질 주석이 포함되어 있습니다. 또한 알고리즘 팀이 설계한 점진적으로 생성되는 스크립트 생성 프레임워크를 통해 모델은 고도로 구조화되고 흥미로운 스크립트를 출력할 수 있습니다. 초보자와 숙련된 시나리오 작가 모두 이 모델을 통해 매력적인 단편 극 스크립트를 만들 수 있습니다.
감동적인 스토리가 완성된 후 다음 단계는 이러한 스토리를 촬영 대본으로 변환하는 것입니다. 전통적인 제작 모델에서는 이 연결을 위해 배우를 초대하고 장면을 오프라인으로 설정해야 하며 촬영 전에 필수 사항에 대해 배우와 소통해야 합니다. 인력과 비용이 필요합니다. 그러나 이것들은 모두 대규모 AI 모델로 대체될 수 있습니다. SkyReels는 이 링크에서 Kunlun Wanwei를 사용합니다.자체 개발한 대형 스토리보드 모델 StoryboardGen,이 모델은 영화 및 TV 애니메이션 데이터를 역처리하여 고품질 산업 등급 스토리보드 데이터 세트를 얻고 스토리보드 다중 에이전트 프레임워크를 설계하여 장면, 샷, 캐릭터 및 액션의 고품질 생성을 달성합니다. 이미지 생성 효과 측면에서 Kunlun Wanwei는 자체 개발한 DiT-Moe 모델을 사용하여 이미지 품질을 향상시킵니다.
공식적인 촬영 과정과 마찬가지로, 완전한 스토리 시스템을 얻으려면 샷이 유기적으로 통합되어야 합니다.SkyReels는 AI 3D 엔진과 대형 비디오 모델을 심층적으로 통합하여 3D 생성, 비디오 생성, 3D 및 비디오 하이브리드 생성을 달성하는 업계 최초의 혁신적인 플랫폼인 WorldEngine을 사용합니다.。
WorldEngine 혁신 플랫폼은 각각 다른 모델을 사용하는 여러 하위 링크로 구성됩니다.
3D 생성 모듈에서는,자체 개발한 Sky3DGen 대형 모델을 사용하여 자연풍경부터 미래도시, 정적인 객체부터 동적인 캐릭터까지 다양한 3D 요소와 장면을 생성할 수 있으며, 사용자가 즉시 볼 수 있도록 실시간 3D 장면 상호작용 기능을 제공합니다. 효과를 조정하고 편집하여 창작 과정의 속도를 높이세요. WorldEngine의 지원으로 사용자는 3D 가상 스튜디오를 구축하여 가상 촬영 경험을 얻을 수 있습니다.
(3D 장면의 지능적인 생성)
3D 및 비디오 하이브리드 생성 모듈에서 Kunlun Wanwei는 레이어 융합 기술을 핵심으로 사용하여 3D 및 비디오 하이브리드 생성 모델을 생성합니다. 비디오의 모든 요소는 3D AI 엔진 또는 대형 비디오 모델을 사용하여 생성되도록 자유롭게 선택할 수 있습니다. 또한 Kunlun Wanwei는 믹싱 시 발생하는 조명 및 스타일 차이의 세부 사항에 대해 퓨전 생성 모델을 별도로 훈련하여 레이어 퓨전 후의 비디오가 더 나은 일관성을 제공하도록 했습니다.
(동영상 생성을 위해 혼합)
엔진 사용으로 인해 WorldEngine은 기존 비디오 생성에 비해 비용 절감을 달성했으며 동시에 생성 속도도 몇 배나 향상되었습니다.
여기서는 기본적으로 짧은 영상이 생성되기는 하지만, 드라마를 자주 보는 사람들도 좋은 대사와 BGM의 전개가 반의 노력으로 두 배의 성과를 거두는 효과가 있다고 느낄 것이다.
대사 측면에서는 수만 권의 소설을 딥러닝한 스카이릴스의 AI 텍스트 이해 기술을 통해 자동으로 텍스트에서 인물 대화와 감정 표현을 식별하고 문장 사이의 합리적인 일시정지를 예측할 수 있다. 내레이션 측면에서 스카이릴스는 감정 음성 합성 기술을 사용해 내레이션의 기복 리듬을 활용해 캐릭터 대사가 풍부한 감정으로 가득 차도록 돕습니다.
Kunlun Wanwei는 SkyReels의 지능형 에이전트가 텍스트를 이해할 수 있을 뿐만 아니라 대본의 장면 분위기도 지능적으로 분석할 수 있다고 밝혔습니다. “고급 다중 모드 검색 및 배경 음악(BGM) 생성 기능을 기반으로 비디오 지능을 합리적인 배경과 일치시킬 수 있습니다. 음악은 모든 프레임을 음악과 완벽하게 조화시킵니다.”
Kunlun Wanwei의 AI 단편 드라마 플랫폼 SkyReels는 AI 단편 드라마 사용자 제작 콘텐츠(UGC)와 전문 사용자 제작 콘텐츠(PUGC)의 폭발적인 성장을 가져올 것으로 예상되는 혁신적인 도구로, 단편 드라마 콘텐츠 생태계에 전례 없는 활력을 불어넣을 것입니다. 단편드라마 콘텐츠 제작과 소비자 시장의 더욱 빠른 성장. AI 기술이 주도하는 단편드라마 창작과 소비의 시대가 온다.
궈하이증권 리서치 보고서에서는 AI가 단편 드라마의 제작 능력을 높이고 비용을 절감할 것으로 기대된다고 언급했다. 해외 단편드라마 시장 규모는 보수적으로 약 360억 달러로 추산된다.
SkyReels는 Kunlun Wanwei의 해외 레이아웃 전략의 전형이며, 그 뒤에는 All in AIGC 전략적 사고가 있습니다.
2020년 Kunlun Wanwei 창립자 Zhou Yahui는 AIGC의 잠재력을 보고 AI 시스템이 새로운 콘텐츠의 황금기를 열 것이라고 예측했습니다.
Kunlun Wanwei 회장 겸 CEO Fang Han은 모바일 인터넷 시대의 기회를 검토하고 인기 콘텐츠 제품의 규칙을 요약한 결과 대부분이 "free + To C" 모델이라는 사실을 발견했습니다. 수요 지점을 파악함으로써 기하급수적인 사용자 증가를 달성할 수 있습니다. "AI UGC" 플랫폼을 구축하는 것이 Kunlun Worldwide의 핵심 전략이 되었습니다. 이는 1%의 콘텐츠 제작자에게 서비스를 제공하고 99%의 사용자가 이를 허용하는 것입니다. 콘텐츠를 소비합니다.
그렇다면 AIGC 시대에 인기를 끌었던 제품들의 이미지는 무엇일까?
Fang Han은 AI에 적합한 새로운 단말기 측 하드웨어와 새로운 휴대폰이 탄생하면 AIGC가 파괴적인 결과를 얻을 수 있다고 믿습니다. 그러나 이 과정은 여전히 3~5년이 걸릴 것이며 현재의 핵심 임무는 기회를 파악하고 예측하는 것입니다. AIGC를 활용해보세요.
모바일 인터넷 시대의 법칙에 따르면 각 국가마다 고유한 슈퍼앱이 있을 수도 있고, 슈퍼앱이 동시에 여러 국가에서 영토를 분할할 수도 있습니다. 몇 가지 생각 끝에 Fang Han은 유럽, 미국, 일본, 한국, 중국 등 사용자 비용 성능과 수용도가 높은 국가를 먼저 점령한 다음 점차 중동, 동남아시아, 남미로 확산해야 한다고 믿었습니다. 그리고 다른 지역.
국가를 정의한 후 Kunlun Wanwei의 경영진은 슈퍼 앱을 탄생시킬 수 있는 수직적 카테고리에 대해 생각하기 시작했습니다. 그들은 "우리가 어떻게 거대 기업이 될 수 있는가?"라고 스스로에게 질문했습니다. 온라인 기사, 단편, 애니메이션 등 특정 수직 엔터테인먼트 산업에 관련된 경우 AIGC에서도 동일한 논리가 반복됩니다.
현재 Kunlun Wanwei는 'AI UGC' 전략에 대응하여 중국에서 체계적인 레이아웃을 수행했으며 대형 모델, AI 검색, AI 음악 및 기타 분야에서 제품 매트릭스를 구축했습니다.
그중 Kunlun Wanwei의 대형 모델은 많은 반복을 거쳤습니다.
2월에 새로운 버전 출시환경부대형 언어 모델 "Tiangong 2.0" 및 "Tiangong AI Intelligent Assistant" 앱의 새 버전;
4월에는 "Tiangong 3.0" 기본 모델과 "Tiangong SkyMusic" 음악 모델이 공식적으로 공개 테스트를 시작했습니다.
지난 6월 Kunlun Wanwei는 "Tiangong 3.0"의 일부인 2,000억 개의 희소 대형 모델 Skywork-MoE를 오픈소스화했습니다.오픈AI지원되지 않는 국가 및 지역의 API 트래픽을 차단한다고 주장하면서 Tiangong Open Platform은 OpenAl API 사용자를 위한 "원클릭 재배치 계획"을 시작하고 Tiangong 2.0 및 Tiangong 3.0 모델을 포함하여 1억 5천만 개의 토큰 API 호출 리소스를 제공했습니다.
대형 모델을 반복하는 동안 AI 검색도 Fang Han의 핵심 초점에 들어갔습니다. Kunlun Wanwei는 OpenAI의 SearchGPT보다 1년 일찍 AI 검색을 계획했으며 올해 검색 제품을 업그레이드하여 텍스트, 사진, 비디오 등 섹션, 사용자 검색을 지원합니다. 결과를 마인드맵, 표, 개요 등의 형태로 제시할 수 있으며, 개요와 마인드맵을 저장하여 직접 PPT를 생성할 수도 있습니다.
제품 수준 외에도 Kunlun Wanweiya는 국제 대학과 협력하여 오픈 소스 디지털 에이전트 R&D 툴킷 AgentStudio를 개발하여 연구원과 개발자에게 에이전트의 전체 개발 프로세스를 포괄하는 포괄적인 플랫폼을 제공했습니다.
국내든 해외든 각 언어 시스템에는 자체 제품 세트가 필요합니다. Kunlun Wanwei는 AIGC 플랫폼의 글로벌 배당 기간이 곧 다가올 것이라고 믿습니다.
