소식

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

이 기사의 저자: Li Dan

출처: 하드 AI

동부 표준시 기준 7월 29일 월요일, NVIDIA는 미국 덴버에서 개최된 연례 컴퓨터 그래픽 및 인터랙티브 기술 컨퍼런스 및 전시회인 SIGGRAPH 2024에서 새로운 도구를 공개했습니다.

Nvidia CEO Huang Renxun은 SIGGRAPH 2024에서 이번 주 Nvidia가 올해 데뷔하는 새로운 칩 아키텍처인 Blackwell 아키텍처 샘플을 보낼 것이라고 밝혔습니다. 동시에 Nvidia는 기업의 AI 모델 대규모 배포를 촉진하기 위해 인공지능(AI) 추론을 최적화하는 데 사용되는 클라우드 기반 마이크로서비스인 NIM(Nvidia 추론 마이크로 서비스)을 주로 포함하는 일련의 소프트웨어 업데이트를 발표했습니다.

NVIDIA는 올해 3월 NIM을 출시하면서 NIM이 시장 출시 시간을 단축하고 클라우드, 데이터 센터, GPU 가속 워크스테이션 어디에서나 생성 AI 모델 배포를 단순화하도록 설계된 최적화된 추론 마이크로서비스를 제공한다고 소개했습니다. NIM은 LLM(대형 언어 모델), VLM(시각 언어 모델), 음성, 이미지, 비디오, 3D, 약물 개발, 의료 영상 등을 위한 모델을 포함하여 여러 도메인에 걸쳐 AI 사용 사례를 지원합니다.

개발자는 NVIDIA의 호스팅 클라우드 API를 사용하여 새로운 생성 AI 모델을 테스트하거나 NIM을 다운로드하여 모델 자체를 호스팅하고 주요 클라우드 제공업체 또는 온프레미스에서 Kubernetes를 사용하여 빠르게 배포하여 개발 시간, 복잡성 및 비용을 줄일 수 있습니다. NIM 마이크로서비스는 알고리즘, 시스템 및 런타임 최적화를 패키징하고 업계 표준 API를 추가하여 AI 모델 배포 프로세스를 단순화합니다. 이를 통해 개발자는 광범위한 사용자 정의나 전문 지식 없이도 NIM을 기존 애플리케이션 및 인프라에 통합할 수 있습니다.

월요일에 NVIDIA가 발표한 업데이트는 NIM 추론 마이크로서비스 라이브러리를 확장하여 물리적 세계 환경, 고급 시각적 모델링 및 다양한 수직 애플리케이션을 포괄합니다. NVIDIA는 미리보기 버전에서 약 100개의 NIM 추론 마이크로서비스를 제공했으며 현재 정식 버전을 출시하고 있습니다. 예를 들어, NVIDIA의 새로운 NIM의 일부로 영상 미디어 회사인 Getty Images Holdings의 4K 이미지 생성 API와 이미지, 영화, 음악과 같은 디지털 콘텐츠 제공업체인 Shutterstock Inc.의 3D 이미지 생성기가 곧 출시될 예정입니다. . 둘 다 비전 생성 AI를 위한 다중 모드 아키텍처인 Nvidia의 Nvidia Edify를 사용합니다.

NVIDIA는 같은 날 자연어 처리(NLP) 도구 세트 및 플랫폼 Hugging Face와 제휴하여 개발자가 Hugging Face Hub에서 호스팅되는 오픈 소스 AI 모델을 사용하여 신속하게 프로토타입을 제작하고 프로덕션에 배포할 수 있도록 지원하는 서비스로 추론을 출시했다고 발표했습니다. 이번 협력을 통해 개발자를 위한 AI 모델 배포가 단순화될 것이라고 의견이 나왔습니다.

fVDB는 실제 3D 데이터를 활용하여 공간 인텔리전스를 생성합니다.

그중 엔비디아는 실제 3D 데이터를 사용해 공간 지능을 생성하는 fVDB를 출시했다. 엔비디아는 생성 물질 AI 모델이 물질 세계의 미세 운동 능력이나 총 운동 능력의 작동을 이해하고 수행할 수 있다고 주장합니다. 물리적 세계의 3차원을 이해하고 탐색하려면 공간 지능이 필요합니다. 이러한 종류의 AI에 현실적인 규모를 처리할 수 있는 강력하고 일관된 프레임워크를 제공하기 위해 NVIDIA는 희소, 대규모, 고성능 공간 인텔리전스를 위해 설계된 딥 러닝 프레임워크인 fVDB를 구축했습니다.

fVDB는 물, 불, 연기 및 구름과 같은 희박한 체적 데이터를 시뮬레이션하고 렌더링하기 위한 업계 표준 구조 및 라이브러리인 OpenVDB를 기반으로 구축되었습니다. fVDB는 이전 프레임워크보다 4배의 공간 규모, 3.5배의 성능, 대규모 실제 데이터 세트에 대한 액세스를 제공합니다. 이전에는 여러 딥 러닝 라이브러리가 필요했던 기능을 결합하여 프로세스를 단순화합니다.

오픈 소스 모듈형 프레임워크 Isaac Lab은 로봇 학습을 가속화하는 시뮬레이션을 제공합니다.

NVIDIA는 또한 로봇 학습 기술에 대한 기존 훈련 방법의 한계를 해결할 수 있는 로봇 학습을 위한 오픈 소스 모듈형 프레임워크인 Isaac Lab을 출시했습니다.

Isaac Lab은 물리적 세계 AI 기능과 GPU 기반 물리적 세계 시뮬레이션을 제공하여 다양한 훈련 환경을 위한 모듈식 고충실도 시뮬레이션을 제공합니다.

Isaac Lab은 모방 학습(인간 모방)과 강화 학습(시행 착오를 통한 학습)을 지원하여 모든 로봇 구현에 유연한 훈련 방법을 제공합니다. 이는 교육 시나리오를 위한 사용자 친화적인 환경을 제공하고 로봇 제조업체가 변화하는 비즈니스 요구 사항에 따라 로봇 기술을 추가하거나 업데이트하는 데 도움을 줍니다.

NVIDIA NIM 및 VIA 마이크로서비스를 사용하여 VLM 기반 시각적 AI 에이전트 생성

NVIDIA는 음성 및 번역, 비전, 사실적인 애니메이션 및 동작을 지원하여 물리적 세계의 AI에 맞게 NIM을 맞춤화했습니다. NVIDIA는 이제 개발자 프리뷰에서 다운로드할 수 있는 VIA 마이크로서비스를 출시합니다.

VIA 마이크로서비스는 NIM과 쉽게 통합될 수 있으며 사용자는 NVIDIA의 모델 미리보기 API 및 다운로드 가능한 NIM 마이크로서비스 API 디렉터리에서 모든 LLM 또는 VLM 모델을 유연하게 사용할 수 있습니다. NVIDIA Metropolis 마이크로서비스의 확장인 VIA 마이크로서비스는 엣지 또는 클라우드에 배포되는 VLM 및 NIM 기반 비주얼 AI 에이전트의 개발을 가속화하는 클라우드 네이티브 빌딩 블록입니다.

생성적 AI, NIM 마이크로서비스 및 기본 모델의 도움으로 사용자는 이제 더 적은 수의 모델을 사용하여 광범위한 인식과 풍부한 상황 이해를 갖춘 앱을 구축할 수 있습니다. VLM은 자연어 단서를 이해하고 시각적 질문 답변을 수행할 수 있는 시각적 AI 에이전트를 지원합니다. Visual AI 에이전트는 컴퓨터 비전 기능을 사용하여 물리적 세계를 인식하고 상호 작용하며 추론 작업을 수행합니다.

이러한 에이전트는 다양한 산업 분야에서 애플리케이션의 가능성을 완전히 열어줄 수 있으며 앱 개발 워크플로를 크게 단순화하고 이미지 또는 비디오 요약, 대화형 시각적 질문 및 답변, 시각적 경고와 같은 혁신적인 새로운 인식 기능을 제공할 수 있습니다. 이러한 시각적 AI 에이전트는 공장, 창고, 소매점, 공항, 교차로 및 기타 장소에 배치되며, 자연스러운 상호 작용에서 생성된 풍부한 통찰력을 활용하여 운영 팀이 더 나은 결정을 내리는 데 도움이 됩니다.

Omniverse Replicator는 모델 훈련을 제한하는 데이터 부족 문제를 해결하는 데 도움이 됩니다.

NVIDIA는 NIM 마이크로서비스를 사용하여 NVIDIA의 Omniverse Replicator를 사용하는 USD용 맞춤형 합성 데이터 생성(SDG) 파이프라인을 구축하는 방법을 소개했습니다. Omniverse Replicator는 Universal Scene Description(OpenUSD) 및 NVIDIA RTX를 기반으로 구축된 SDK입니다.

개발자는 특히 NIM 마이크로서비스와 Omniverse Replicator를 사용하여 생성 AI를 지원하는 SDG 파이프라인을 구축하고 종종 모델 교육을 제한하는 실제 데이터 부족 문제를 해결할 수 있습니다.

NVIDIA의 Omniverse 및 시뮬레이션 기술 담당 부사장인 Rev Lebaredian은 다음과 같이 말했습니다.

“우리는 OpenUSD를 기반으로 언어, 기하학, 재료, 물리학 및 공간을 이해할 수 있는 세계 최초의 생성 AI 모델을 구축했습니다.”

Lebaredian은 NVIDIA가 산업 기업과 소재 AI 개발자가 고성능 모델을 보다 쉽고 빠르게 개발할 수 있도록 OpenUSD에 2016년부터 투자해 왔다고 말했습니다.

NVIDIA는 또한 OpenUSD Alliance를 공동 창립한 Apple과 협력하여 그래픽 지원 데이터 센터 네트워크인 NVIDIA의 Graphics Delivery Network에서 Apple의 Apple Vision Pro까지 하이브리드 렌더링 파이프라인 흐름을 구축하고 있습니다.