소식

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

회사명:beijing yunke technology co., ltd.

파이낸싱 라운드: 엔젤 + 라운드

제품/서비스: aiuni—ai 생성 4d 애니메이션 플랫폼

창립자: hu yating (entrepreneurship star camp 25호)

출생연도: 2000

학력: 북경대학교 컴퓨터공학과

저자 | 마원페이

편집자丨liu hengtao

사진출처: 아이유니 제공

2000년대생 후야팅은 대학 졸업 후 창업을 선택했다. 후야팅은 아름다운 외모와 패셔너블한 옷차림으로 기업가의 이미지에 대한 우리의 상상력을 완전히 새롭게 해준다.

북경대학교 컴퓨터공학과를 졸업한 hu yating은 google, alibaba, bytedance에서 알고리즘 엔지니어로 근무했으며 정보학 올림피아드에도 참가하여 전국 금메달과 최고의 여성 운동선수상을 수상했습니다. 큰 공장에서 인턴 생활을 하던 중 인터넷 트래픽이 최고조에 달했지만 3d는 콘텐츠 차원이 높아지는 것을 보고 대학 졸업 후 창업을 결심했다.

hu yating이 설립한 aiuni는 ai 생성 4d 애니메이션을 위한 ip 플랫폼입니다. 올해 6월 aiuniai의 3d 생성 모델 unique3d가 github, huggingface 및 기타 플랫폼에서 오픈 소스로 빠르게 huggingface 인기 모델 순위에 진입했습니다. "가장 인기 있는 모델"로 선정되었습니다. "최고의 사진에서 3d 모델 생성"은 많은 개발자로부터 칭찬을 받았습니다.

unique3d는 4090 그래픽 카드에서 약 30초 만에 단일 보기 이미지에서 충실도가 높고 다양한 질감의 3d 메시를 생성할 수 있습니다. 많은 네티즌들은 자신의 생성 결과를 소셜 미디어에 공유하고 충실도, 일관성, 효율성 측면에서 매우 높은 수준에 도달한 모델을 칭찬했습니다. 단 몇 달 만에 unique3d는 수백만 개의 사본을 생성했습니다.

올 여름, hu yating은 star camp의 최첨단 ai 스타 가속화 프로그램인 entrepreneurship star camp의 25단계에 합류했습니다.

가속 후 그녀는 이달 19일부터 20일까지 2024demo china 무대에 올라 선진 분야의 유명 투자자, 업계 전문가 및 업계 파트너에게 제품 및 상업 응용 프로그램에 대한 생각을 보여줄 예정입니다. 방법.

3d 시장 공략

3d 기술은 인터넷 세계에서 현실 세계를 매핑하는 핵심 수단으로 게임 개발, 영화 제작, 제품 디자인, 전자상거래 렌더링, 건축 계획 등 다양한 분야에 침투해 왔습니다. 인터넷 산업 전체.

적용 시나리오에 따라 3d 모델링 비용도 다양합니다. 모델이 상세할수록 제작 과정이 더 복잡해지고, 제작 주기가 길어지며, 각 3d 모델의 생성 비용이 적어도 몇 가지 이상 필요합니다. 천 위안, 심지어 수만 위안.

현재 애니메이션, 영화, tv, 게임 및 기타 엔터테인먼트 산업이 3d 모델링의 주요 응용 분야입니다. 게임 산업에서는 3d 엔진의 지속적인 개발로 인해 3d 게임이 점차 시장의 주류가 되었으며, 애니메이션 영화 및 tv 산업에서는 3d 기술을 사용하여 웅장한 장면만 만드는 데 3d 모델링에 대한 수요가 매우 높습니다. 그린스크린 기술과 중요한 배우들이 필요해 완성도가 높아 드라마의 인건비가 절감된다.

toubao가 발표한 데이터에 따르면 중국의 3d 모델링 시장 규모는 2021년에 103억 4천만 위안에 달할 것이며, 2026년에는 시장 규모가 195억 7천만 위안에 이를 것으로 예상됩니다. 2021년 세계 3d 애니메이션 시장 규모는 약 1,640억 달러로 추산되며, 연평균 복합 성장률(cagr) 11.5%로 성장해 2026년에는 약 3,100억 달러에 이를 것으로 예상됩니다.

aiuni 팀은 이 시장을 목표로 삼고 있습니다.

hu yating 외에도 회사의 기술 파트너 wu kailu는 정보학 올림피아드에 참가하면서 hu yating을 만났습니다. 그는 tsinghua university의 yao class를 졸업하고 interdisciplinary information institute에서 3d 생성 및 nerf 방향의 연구에 참여했습니다. 그는 학부 시절에 많은 논문을 발표했으며, fsd(텍스트-3d 흐름 분별 증류) 및 memsr(초해상도 모델의 효율적 훈련)을 혁신적으로 제안했습니다. 그는 한때 정보학 올림피아드 국가 훈련 팀에 참가했고 대회 중에 만났습니다. 회사의 운영 파트너인 ren jinshan은 전 교양과목 챔피언입니다. 그녀는 북경 대학교 광화 경영 대학원을 졸업하고 시카고 대학교에서 미술 이론 석사 학위를 취득했습니다.

aiuni는 angel+ 라운드를 포함해 세 번의 자금 조달을 성공적으로 받았습니다.

기술적 이점을 형성하기 위한 수직 모델 생성

제품을 만드는 과정에서 hu yating은 거의 모든 애니메이션과 게임이 캐릭터를 중심으로 이루어지기 때문에 모든 유형의 3d 자산 중에서 가장 가치 있는 것은 캐릭터라는 사실을 발견했습니다. 게다가 많은 사용자들이 고전 캐릭터를 재현하고 있거나, 구현하고 싶은 오리지널 캐릭터를 가지고 있으며, 독창성에 대한 요구가 상대적으로 크다고 hu yating은 이 부분이 aigc로 생성하기에 더 적합하다고 믿습니다.

"이런 사용자들은 3d 캐릭터를 편리하고 저렴하게 제작하기를 희망하지만 3d 모델링 비용이 비싸고 대부분의 경우 애니메이션, 영화, tv 등 b측 스튜디오에서만 사용할 수 있습니다."

ai를 활용해 3d 모델링의 문턱을 극한까지 낮추면, 기존에 3d 콘텐츠를 제작할 수 없었던 사용자들도 독립적으로 새로운 3d 작품을 제작할 수 있게 된다.

"지금 우리가 보는 대부분의 영상 콘텐츠는 실시간으로 촬영됩니다. 앞으로는 3d 모델을 기반으로 한 애니메이션과 특수효과 콘텐츠가 짧은 영상으로 제작되어 영상의 양과 창의성이 크게 늘어날 것입니다." 말했다.

다른 이미지에 비해 캐릭터 생성이 더 어렵습니다. hu yating은 "3d 모델은 상대적으로 전문적인 장면이기 때문에 aiuni는 다음으로 캐릭터 생성, 애니메이션 생성 및 비디오 합성을 수행하여 디지털 콘텐츠 제작자에게 서비스를 제공할 것입니다. 이 모든 것들은 모델 정확도에 대한 더 높은 요구 사항을 제시합니다. . 이는 미세한 차원을 포함하기 때문입니다." 인간의 뼈, 의류 액세서리 등 많은 양의 디테일과 데이터가 필요하며, 동시에 기하학적인 데이터 처리가 큰 과제입니다. 왜냐하면 표준 모델 포즈(예: 포즈), 소재 및 동작을 지원해야 하기 때문입니다. 또한 데이터를 더 자세히 표준화해야 합니다.

aiuni의 솔루션은 알고리즘 아키텍처 혁신을 통해 sota 수준의 정확도를 달성하는 것입니다. sds(score distillation sampling)와 같은 이전 방법과 비교하여 aiuni는 장기적인 최적화, 열악한 기하학적 품질 및 불일치가 필요한 모델 생성 문제를 해결합니다. 동시에 팀은 다시점 확산 모델을 기반으로 한 방법이 국부적 불일치 및 생성 해상도로 인해 제한되어 미세한 질감과 복잡한 기하학적 세부 사항을 생성하기 어려운 문제도 최적화했습니다. 256에서 2k/8k 수준으로 증가하여 모델 정확도 및 품질에 대한 사용자 요구 사항을 충족했습니다.

unique3d 논문에 따르면 이 솔루션은 다중 뷰 확산 모델과 해당 일반 확산 모델, 다단계 업그레이드 프로세스 및 즉각적이고 일관된 메시 재구성 알고리즘 isomer를 통해 더 나은 3d 결과를 생성할 수 있습니다. 실험에서 aiuni의 모델은 instantmesh, crm 및 openlrm과 비교되었으며 다른 모델보다 훨씬 더 정확한 기하학적 구조와 상세한 텍스처를 생성할 수 있었습니다.

"unique3d는 생성성과 일반화 가능성을 갖추고 있으며 렌더링 엔진에서 실제로 사용되어 사용자에게 매우 가치 있는 콘텐츠를 만들 수 있습니다." hu yating은 경쟁 제품과 비교할 때 unique3d의 장점은 cg 그래픽 및 ai 차별화 가능한 렌더링 3d가 가능하다는 것입니다. 잘 결합되었습니다.

hu yating은 대형 제조업체의 일반화된 대형 모델과 비교할 때 aiuni가 더 많은 양식을 만들고 더 수직적이라고 믿습니다. “사실 우리는 캐릭터 설정 모델, 3d 모델, 자동 바인딩 또는 동작 생성과 같은 다양한 양식을 갖춘 수직 모델을 보유하고 있습니다. 데이터 및 렌더링 합성 모델 등을 수직으로 묶을 것이며 이는 순수한 컴퓨팅 성능이나 데이터의 문제가 아니며 알고리즘 아키텍처에 약간의 혁신이 필요합니다.”

대형 비디오 모델의 일반화는 상대적으로 강력하지만 캐릭터 일관성, 동작 제어 가능성, 생성 훈련 비용 및 추론 효율성을 제어하기가 어렵습니다. 이에 비해 aiuni는 이러한 측면에서 더 큰 장점을 가지고 있습니다.

글로벌 ip 창작자를 위한 3d에서 4d까지

aiuni.ai 웹사이트에는 현재 각각 3d 세계와 3d 모델을 생성할 수 있는 두 가지 온라인 기능이 있습니다. hu yating은 aiuni가 출시할 다음 기능은 애니메이션 비디오 모드를 중심으로 3d 캐릭터 생성, 캐릭터 애니메이션 생성, 실제 비디오를 3d 캐릭터로 교체, 캐릭터 애니메이션을 실제 비디오로 합성 등을 할 것이라고 밝혔습니다. 이는 aiuni 팀이 지향하는 방향, 즉 역동적인 3d 콘텐츠(예: 4d)이기도 합니다.

aiuni 팀은 aigc 다중 양식의 개발 추세가 2d 생성에서 3d 모델 생성, 마지막으로 4d 콘텐츠 생성으로 이어진다고 믿습니다. 텍스트에서 2d 이미지를 생성하는 것은 시작에 불과합니다. 2d 이미지에 공간 차원을 부여하면 미래 공간 컴퓨팅의 기본 캐리어이기도 한 3d 모델이 생성됩니다. 그들은 미래에 이 기능이 3d 모델에 시간 차원을 부여하고 빈도가 높은 대화형 4d 콘텐츠가 될 수 있기를 바라고 있습니다.

"3d 캐릭터 모델을 생성한 후에는 모델의 움직임을 변경하거나 모델이 사용자와 상호 작용하도록 하는 등 계속해서 4d로 확장할 수 있습니다. 또한 비디오 렌더링 및 음성 상호 작용 기능도 사용할 수 있습니다. 모델은 계속해서 역동적인 콘텐츠를 만들 수 있습니다." hu yating 그는 자연스러운 음성부터 그림, 3d 모델 및 역동적인 비디오에 이르기까지 프로세스를 완료하기 위해 전체 워크플로우에서 가장 중요한 것은 ai 기술과 그래픽 cg 아트의 결합이라고 말했습니다.

이러한 기대에 힘입어 아이유니는 지난 4월 3d 모델 생성 내부 베타 버전을 처음 출시하고 일부 채널을 통해 초대코드를 발행했다. 올해 10월에는 캐릭터 애니메이션 ip 크리에이터 사용자를 대상으로 하는 새로운 퍼블릭 베타 버전을 출시할 예정이다.

"사용자는 이전에 3d 전문 도구를 사용해 본 적이 없을 수도 있지만 단지 acgn 게임이나 애니메이션의 매니아일 수도 있습니다. 우리 플랫폼을 통해 그는 자신이 좋아하는 ip 캐릭터에 대한 원본이나 콘텐츠 창작물을 만들 수도 있고 플랫폼에서 애니메이션을 내보낼 수도 있습니다. hu yating은 새로운 공개 베타 버전이 캐릭터 생성 및 애니메이션 생성을 지원하며 구강 비디오 및 춤 비디오와 같은 장면에 적합하다고 말했습니다.

비즈니스 모델 측면에서 aiuni의 계획은 전문 창작자와 ip 애호가를 위한 다양한 과금 모델을 출시하는 것입니다. 3d 전문 사용자에게는 3d 원본 데이터가 필요하며 플랫폼은 생산성을 향상시킬 수 있으므로 새로운 미디어 ip 제작자에 대한 지불 의지가 강하며 주로 생성 시간과 렌더링 정확도를 기준으로 토큰 요금이 부과됩니다. 다른 유형의 사용자에게는 창작자 경제가 더 다양합니다. 예를 들어 일부 사용자는 캐릭터에 개인화된 음성 모델을 추가하거나 3d 프린팅 모델을 사용하여 다른 ip 파생물을 생산하기를 원합니다.

hu yating은 aiuni가 향후 ip를 통해 생성된 새로운 미디어 시나리오를 지향할 것이며 ai 기술과 cg 아트를 결합한 더 많은 다중 모드 알고리즘을 점차적으로 출시할 것이라고 말했습니다. aiuniai의 해외 사용자는 70%를 차지하고 있으며, 글로벌 크리에이터를 대상으로 플랫폼이 운영될 예정입니다. hu yating은 3d/4d 양식이 여전히 새로운 것이며 중국 사람들이 더 많은 일을 하고 있으며 회사가 해외에 직접적인 경쟁 제품이 없다고 말했습니다.

"우리의 임무는 뉴미디어의 디지털 콘텐츠 제작자를 대상으로 ai 생성 4d 애니메이션을 위한 ip 플랫폼을 만드는 것입니다. 3d 생성은 우리의 첫 번째 단계입니다. 우리는 이 새로운 모드에서 무한한 창작 공간을 가지며 aigc 콘텐츠 결합을 믿습니다. 차원성을 갖춘 기술은 차세대 ip 창출에 무한한 활력을 불어넣을 것입니다."라고 hu yating은 말했습니다.

ai 기술이 가져온 산업 패러다임 혁명은 hu yating과 같은 많은 젊은 기업가들이 꿈을 실현할 수 있게 해주었습니다.