소식

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

스프링 리버 배관 오리 예언자. nvidia의 현재 조치는 몇 가지 새로운 추세를 드러내고 있습니다.

텍스트 | zhou luping 및 zhao yanqiu

편집자 | 니우후이

얼마 전 엔비디아는 3d 모델링을 위한 생성 ai 서비스를 출시해 업계의 큰 관심을 끌었습니다. 이전의 생성 ai는 텍스트, 사진, 비디오 등 2차원 세계에서 콘텐츠를 생성하는 데 더 중점을 두었습니다. 이번에 nvidia는 생성적 ai를 사용하여 기업이 3d 자산을 구축하고, 디지털 트윈 및 시뮬레이션 산업의 개발을 가속화하고, 물리적 세계에서 ai 적용을 가속화할 수 있도록 지원합니다.

01

"cuda 네이티브"는 업계를 대상으로 합니다.

스프링 리버 배관 오리 예언자. 가속 컴퓨팅 분야의 세계적 리더인 nvidia의 행동은 몇 가지 새로운 추세를 드러내고 있습니다.

nvidia 창립자이자 ceo인 jensen huang은 2024년 siggraph에서 열린 두 차례의 대화에서 생성 ai와 가속 컴퓨팅이 시각화를 통해 제조 및 기타 산업을 어떻게 변화시킬 수 있는지에 대한 ai에 대한 최신 통찰력에 중점을 두었습니다. nvidia는 또한 컨퍼런스 동안 새로운 nim 마이크로서비스 세트를 출시했습니다.

siggraph 컨퍼런스는 컴퓨터 그래픽의 최신 혁신을 논의하는 장소입니다. nvidia는 openusd, 기하학, 물리학, 재료 등에 적합한 생성 ai 모델과 nim 마이크로서비스를 출시했습니다. openusd는 3d 장면의 내부 데이터 교환을 위한 오픈 소스 소프트웨어이며 점차 3d 비전, 건축, 디자인, 제조 등 많은 산업 분야에서 표준이 되었습니다.

이러한 모델과 서비스를 통해 개발자는 제조, 자동차, 로봇 공학 및 기타 산업 분야의 애플리케이션 개발을 가속화할 수 있습니다.

두 차례의 노변 대화에서 huang은 디지털 트윈과 가상 세계 구축의 중요성에 대해 논의했습니다. 그는 업계가 도시 규모의 대규모 디지털 트윈을 구축해 효율성을 높이고 비용을 절감하고 있다고 말했다. "예를 들어 ai는 차세대 휴머노이드 로봇에 배포되기 전에 이 가상 세계에서 훈련될 수 있습니다."

jensen huang이 산업 시각화, 가상 세계 또는 디지털 트윈에 집중하는 이유는 무엇입니까? nvidia가 이번에 cuda 생태계에서 새로운 nim 마이크로서비스를 출시한 이유는 무엇입니까?

nvidia 공식 홈페이지의 사진

nvidia의 omniverse 및 시뮬레이션 기술 담당 부사장인 rev lebaredian이 말했듯이 중공업 분야에서 생성 ai 물결이 도래했습니다. digital intelligence frontier는 또한 생성 ai가 일부 단순한 시나리오에서 복잡한 생산 링크로 이동하고 있다는 사실도 알게 되었습니다. 위에서 언급한 기술 생태계는 이 과정을 가속화할 수 있습니다.

“최근까지 디지털 세계의 주요 사용자는 창조 산업이었습니다. 이제 nvidia nim 마이크로서비스가 openusd에 가져온 향상된 기능과 접근성을 통해 업계에서는 이를 위한 물리 기반 가상 세계와 디지털 트윈을 만들 수 있습니다. ai 기술 붐의 물결"이라고 lebaredian 목사는 말했습니다.

자동차 업계에서는 국내 자동차 업체들이 디지털 트윈을 '롤링'하고 있다. "테슬라는 최근 fsd 12.5 버전 출시를 앞두고 있으며, 중국에서도 fsd 구현을 적극적으로 추진하고 있습니다." 중국 대형 자동차 회사의 한 인공지능 관계자는 digital intelligence frontier에 "테슬라는 시뮬레이션을 전략적 목표로 여기고 있으며, 우리는 또 메타버스를 구축해 자율주행 데이터의 폐쇄루프 문제도 해결한다. 이제 자동차 회사는 메타버스 시뮬레이션 환경에서 롱테일 시나리오 교육을 해결할 수 있습니다.

로봇업계에서는 전력검사 로봇업체가 로봇이 발전소 안의 복잡한 환경과 물리적 공간을 실시간으로 인지하고, 이동경로를 계획하며, 수천 미터를 다양한 디바이스에서 볼 수 있도록 시뮬레이션 환경을 통해 ai를 훈련시키고 있다. 길을 따라.

건축 설계는 복잡하고 시간이 많이 걸리는 작업이며 건축 설계의 3d 모델은 필수적인 결과물입니다. 일부 복잡한 기하학적 모양과 특수한 모양의 구조의 경우 3d 모델을 재구성하는 것이 더 어렵습니다. 이제 일부 디자인 회사는 ai 회사와 협력하여 일부 사진, 스케치 및 텍스트만으로 모델을 생성하려고 노력하고 있습니다. 디자인을 개선하기 위해 건축 디자인에 다양한 재료를 적용할 수도 있습니다.

철강 산업에서 금속 조직 분석은 모재의 전반적인 성능을 이해하기 위해 현미경을 통해 재료 조각 내부의 결함과 구조를 관찰하는 방법입니다. 전통적인 육체 노동은 효율성이 낮고 인간의 경험에 크게 의존합니다. 이제는 과거 지식베이스를 활용해 전문 ai를 양성해 소재를 종합적으로 분석하는 게 많은 철강사의 공통 매력이다.

nvidia는 새로운 nim 마이크로서비스를 통해 애플리케이션 회사가 처음부터 시작하지 않고 서비스를 직접 호출한 다음 이를 자체 데이터와 결합하여 애플리케이션을 신속하게 구현할 수 있도록 합니다. 따라서 일부 회사에서는 이를 "cuda 네이티브"라고 설명합니다.

생성 ai가 엣지 시나리오에서 심층 시나리오로 이동함에 따라 huang renxun은 "모든 사람이 ai 보조자를 갖게 될 것"이라고 말했습니다. 동시에 ai와 이미지 기술의 통합이 심화되고 있습니다. “적은 에너지로 날씨를 더 잘 예측하기 위한 과학적 컴퓨팅이든, 이미지를 생성하기 위해 제작자와 협력하든, 가상을 만드는 것이든 거의 모든 산업이 이 기술의 영향을 받을 것입니다. 황 교수는 “생성 ai는 로봇 자율주행차 분야에도 혁명을 일으킬 것”이라고 말했다.

02

새로운 nim 마이크로서비스는 어떤 상상을 불러일으키나요?

위에서 언급한 산업 응용 프로그램 뒤에는 모두 3d 모델링 및 시뮬레이션 기술 응용 프로그램이 사용됩니다.

과거에는 3d 콘텐츠와 장면을 구성하는 데 모델링, 채색, 애니메이션, 조명, 렌더링 등 복잡한 체인과 프로세스가 수반되어 항상 골치 아픈 문제였습니다.

지난 수십 년 동안 애니메이션, 시각 효과 및 게임 스튜디오는 파이프라인에 있는 다양한 도구 간의 상호 운용성을 개선하기 위해 노력해 왔지만 성공은 제한적이었습니다. 한 위치에서 다른 위치로 데이터를 이동하는 것은 까다롭기 때문에 스튜디오는 데이터 상호 운용성을 관리하기 위해 복잡한 워크플로를 구축했습니다.

더욱이, 시스템과 도구의 분리 외에도 전통적인 3d 제작 프로세스는 여러 부서와 직원이 형식을 변환하고 수정하는 선형 협업이므로 시간이 많이 걸리고 노동 집약적입니다.

openusd는 nvidia, pixar, apple 및 기타 제조업체의 주도로 2023년에 설립된 오픈 소스 범용 3d 데이터 교환 프레임워크로, 소프트웨어 도구와 데이터 유형 간의 상호 운용성을 통해 가상 세계를 구축할 수 있으며 상호 운용성과 호환성이 매우 높습니다. . 3d 장면을 만들 때 많은 작업 흐름과 복잡성 문제를 해결합니다.

openusd는 nvidia omniverse 플랫폼의 기반이기도 합니다. wired 매거진의 수석 작가와의 대화에서 huang renxun은 다음과 같이 말했습니다. openusd는 거의 모든 도구의 다중 모드 표현을 통합한 최초의 형식입니다. 이상적으로는 시간이 지남에 따라 거의 모든 형식을 가져올 수 있으므로 모든 사람이 협업하고 콘텐츠를 영원히 유지할 수 있습니다. generative ai는 omniverse가 더 나은 시뮬레이션 결과를 생성하는 데 확실히 도움이 될 것입니다.

nvidia가 openusd 개발을 위해 이번에 출시한 nim 마이크로서비스는 openusd 개발을 위한 세계 최초의 생성 ai 모델이기도 합니다. 생성적 ai 기능을 nim 마이크로서비스 형태로 usd 워크플로우에 통합하여 사용자가 openusd를 사용할 수 있는 임계값을 크게 낮춥니다. 동시에 nvidia는 로봇 데이터 형식과 apple vision pro 스트리밍에 적합한 여러 가지 새로운 usd 커넥터도 출시했습니다.

nvidia 공식 홈페이지의 사진

현재 출시된 nim 마이크로서비스는 세 가지입니다. 하나는 usd code nim 마이크로서비스입니다. 이 마이크로서비스는 상식적인 openusd 질문에 답하고 텍스트 프롬프트를 기반으로 python 코드를 자동으로 생성할 수 있습니다.

두 번째는 usd search nim 마이크로서비스입니다. 이를 통해 개발자는 자연어 또는 이미지 입력을 사용하여 대규모 openusd, 3d 및 이미지 데이터베이스를 검색할 수 있어 엔터프라이즈 프로세스 검색 및 자료 처리 속도가 크게 향상됩니다.

세 번째는 업로드된 파일과 openusd 릴리스 버전의 호환성을 확인하고 nvidia omniverse cloud api로 완전히 구동되는 rtx 렌더링 경로 추적 이미지를 생성할 수 있는 usd validate nim 마이크로서비스입니다.

nvidia가 제공하는 기본 nim 마이크로서비스 외에도 생태계 파트너는 사용자에게 추론 최적화를 제공하기 위해 이러한 마이크로서비스를 기반으로 여러 인기 있는 ai 모델을 만들고 있습니다.

세계적으로 유명한 크리에이티브 콘텐츠 플랫폼인 셔터스톡(shutterstock)은 3d 프로토타입 제작이나 가상 환경 채우기를 포함해 최신 버전의 엔비디아 edify 비주얼 생성 모델을 기반으로 한 새로운 텍스트-3d 변환 서비스를 출시했습니다.

예를 들어, 가상 장면에 대한 정확한 반사 조명을 만드는 것은 복잡한 작업입니다. 과거에는 창작자들이 고가의 360도 카메라 장비를 운용하거나, 촬영 현장에 가서 배경을 처음부터 새로 만들거나, 방대한 데이터베이스에서 유사한 콘텐츠를 검색해야 했습니다.

하지만 이제 3d 생성 서비스를 통해 사용자는 필요한 특정 환경을 텍스트나 그림으로 설명하기만 하면 최대 16k 해상도의 hdr(high dynamic range) 파노라마 이미지(360 hdri)를 얻을 수 있습니다. 또한 사막, 열대 해변, 구불구불한 산길에 스포츠카가 등장하는 등 이러한 장면과 구성 요소를 빠르게 전환할 수 있습니다.

조명을 만드는 것 외에도 제작자는 콘크리트, 목재, 가죽과 같은 다양한 렌더링 재료를 빠르게 추가하여 자신만의 3d 자산을 구축할 수도 있습니다. 또한 ai의 도움으로 생성된 3d 자산은 언제든지 편집할 수 있으며 다양한 인기 파일 형식으로 제공될 수도 있습니다.

nvidia의 edify ai 모델은 또한 getty images를 통해 아티스트가 이미지의 구성과 스타일을 마음대로 제어할 수 있도록 지원합니다. 완벽한 산호초 사진 위에 빨간 비치볼을 띄우는 것과 같습니다. 또한 크리에이터는 기업 데이터를 사용하여 기본 모델을 미세 조정하여 특정 브랜드의 크리에이티브 스타일에 맞는 이미지를 생성할 수도 있습니다.

이러한 모델 마이크로서비스 및 도구는 브랜드의 3d 자산 생성을 크게 가속화하고 디지털 트윈 개발을 더욱 대중적이고 편리하게 만들 것입니다.

03

first mover 기업이 시도하기 시작했습니다.

3d 콘텐츠 및 자산 생성이 더욱 편리하고 정확해짐에 따라 산업, 자율 주행, 엔지니어링, 로봇 공학 등의 산업은 생성 ai가 가져오는 기술적 이점을 누리고 있습니다. 특히 제조 및 광고 크리에이티브 산업에서는 얼리 어답터 그룹이 nvidia omniverse 플랫폼을 통해 디지털 트윈 및 시뮬레이션 적용을 적극적으로 가속화하고 있습니다.

코카콜라는 마케팅 시나리오에서 omniverse와 nim 마이크로서비스가 제공하는 생성 ai를 사용한 최초의 브랜드입니다. 시연 영상에서는 "아침 햇살에 타코와 살사를 곁들인 테이블을 만들어 주세요"라는 말만 시스템에 자연어로 입력됩니다.

곧 usd search nim 마이크로서비스는 거대한 3d 자산 라이브러리에서 해당 3d 자산을 검색하고 api를 통해 신속하게 호출할 수 있습니다. usd code nim은 이러한 모델을 장면으로 결합할 수 있으며 개발자는 python을 입력하여 이를 얻을 수 있습니다. 새로운 3d 세계를 만드는 데 사용되는 코드는 창의력을 크게 향상시킵니다. 코카콜라는 생성 ai를 통해 전 세계 100개 이상의 시장에서 개인화된 이미지를 맞춤화하여 현지화된 마케팅을 달성할 수 있습니다.

nvidia 공식 홈페이지의 사진

코카콜라의 광고 서비스 제공업체인 wpp는 특별히 지능형 마케팅 운영 시스템을 출시했습니다. 이 시스템은 omniverse 개발 플랫폼과 openusd를 활용하여 다국어 텍스트, 이미지 및 비디오 생성을 간소화 및 자동화하여 광고주와 마케팅 담당자의 콘텐츠 생성 프로세스를 단순화합니다. wpp는 생성적 ai를 통해 고객에게 서비스를 제공함으로써 기발한 아이디어를 현실로 구현합니다.

wpp의 최고 기술 책임자(cto)는 다음과 같이 말했습니다. “이러한 혁신의 장점은 우리가 작업하는 방식과 매우 호환되고 개방형 표준을 최대한 활용한다는 것입니다. 이를 통해 향후 작업이 가속화될 뿐만 아니라 계속해서 발전할 수 있습니다. openusd와 같은 표준에 대한 이전의 모든 투자를 확장합니다. nvidia omniverse와 함께 nvidia nim 마이크로서비스를 사용함으로써 우리는 the coca-cola company와 같은 회사와 함께 그 어느 때보다 빠르게 혁신적인 새로운 생산 도구를 출시할 수 있습니다.”

세계 최대의 가전제품 oem인 foxconn은 멕시코의 새로운 공장을 위해 가상 디지털 트윈 공장을 구축했습니다. 엔지니어는 가상 환경에서 프로세스를 정의하고 로봇을 교육함으로써 공장의 자동화 수준과 생산 효율성을 향상하고 시간과 비용을 절약할 수 있습니다. 그리고 에너지.

foxconn은 또한 omniverse 플랫폼을 사용하여 디지털 트윈을 구축하고 모든 3d cad 요소를 동일한 가상 공장에 통합했으며 omniverse 및 openusd에서 개발된 확장 가능한 로봇 시뮬레이션 플랫폼인 nvidia isaac sim을 사용하여 로봇을 교육했습니다. 디지털 트윈에 사실적인 시각적 표현을 제공합니다.

foxconn 외에도 delta electronics, mediatek, pegatron을 포함한 전자 제조 회사는 nvidia ai 및 omniverse를 사용하여 공장 디지털 트윈을 구축하고 있습니다.

xpeng motors의 mpv 모델 xpeng x9는 설계 과정에서 omniverse 플랫폼을 사용했습니다. 모델 개발 워크플로를 가상 세계에 도입함으로써 xpeng motors는 새 자동차를 설계할 때 기존 워크플로의 병목 현상을 피할 수 있습니다.

예를 들어, omniverse 플랫폼은 강력한 상호 운용성을 갖추고 있어 산업 모델링, 렌더링 및 3d 특수 효과에 사용되는 파일과 데이터에 더 이상 복잡한 변환이 필요하지 않으므로 xpeng motors 설계 팀 간의 통신 및 협업 속도가 빨라집니다. 한편, xpeng motors는 omniverse의 실시간 렌더링 및 광선 추적 기능을 사용하여 자동차 색상 및 인테리어 변화를 즉각적으로 시각화함으로써 가상 효과를 더욱 현실감 있게 만들어 사용자 요구 사항을 충족하고 제품 경험을 향상시키는 데 도움을 줍니다.

지난 2년 동안 생성 ai의 폭발적인 증가로 외부 세계에서 toc 및 협업 사무실 분야의 일부 애플리케이션에 더 많은 관심이 집중되었습니다. 그러나 이제는 물리적 세계에서도 폭발과 기회의 새로운 물결이 열릴 것입니다.