NVIDIA는 인공지능에서의 오픈 스탠더드 요구에 실제 힘을 싣고 있으며, 최신 행보는 그 추진력이 로보틱스, 자율주행차, 머신 비전까지 얼마나 깊이 뻗어 나가고 있는지를 보여준다. 7월, 이 칩 제조사는 “Open Weights and American AI Leadership(오픈 웨이트와 미국의 AI 리더십)”이라는 공개 서한에 서명한 200개 이상의 기업 및 기관에 합류하며, AI 리더십은 단일 플래그십 모델이 아니라 모든 산업 분야 전반에 걸쳐 오픈 시스템이 얼마나 널리 확산되는지로 평가되어야 한다고 주장했다. 이러한 약속을 바탕으로, NVIDIA는 이제 새로운 오픈 물리 AI 모델 패밀리인 Cosmos 3를 선보였다. 이 모델은 카메라가 보는 것을 설명하는 데 그치지 않고, 실제 세계에서 어떤 일이 일어나는지 기계가 이해하고 예측하도록 돕기 위해 설계되었다.
Summary
핵심 요약
- NVIDIA는 오픈 AI 생태계의 발전을 촉구하는 공개 서한에 서명한 200개 이상의 기업 및 기관에 합류했다.
- NVIDIA Cosmos 3는 mixture-of-transformers 아키텍처를 기반으로 구축된 새로운 오픈 물리 AI 파운데이션 모델이다.
- Cosmos 3 패밀리는 Super(64B), Nano(16B), Edge(4B) 세 가지 크기로 구성되며, 각각 다른 배포 요구 사항을 겨냥한다.
- Cosmos 3는 Artificial Analysis, PAIBench, Physics-IQ, RoboLab, VANTAGE-Bench 등 여러 독립 벤치마크에서 1위를 기록하고 있다.
- 로보틱스, 자율주행차, 비전 AI 기업들과 확장 중인 NVIDIA Cosmos Coalition은 이미 이 모델 패밀리를 기반으로 구축을 진행 중이다.
NVIDIA, 오픈 물리 AI 생태계 추진에 동참
모델 웨이트에 대한 오픈 액세스는 개발자가 파운데이션 모델 위에 실제로 무언가를 구축할 수 있게 해 주는 핵심 요소이며, 단순히 접근 권한을 임대하는 것에 그치지 않게 만든다. NVIDIA가 “Open Weights and American AI Leadership(오픈 웨이트와 미국의 AI 리더십)” 서한에 공동 서명하기로 한 결정은 업계 전반에서 힘을 얻고 있는 더 넓은 논지를 반영한다. 즉, 누구나 오픈 모델을 자신의 인프라에서 다운로드, 검토, 커스터마이징 및 실행할 수 있게 하는 것이야말로 애초에 광범위한 AI 도입을 가능하게 한다는 주장이다.
이 원칙은 단일 범용 모델로는 일을 처리할 수 없는 분야에서 가장 중요하다. 로봇, 자율주행차, 실제 환경에서 작동하는 비전 시스템을 다루는 인공지능의 한 분야인 물리 AI가 바로 그런 분야다. 창고 로봇, 배송 차량, 공장 카메라는 모두 전혀 다른 물리적 조건을 추론해야 하므로, 각 배포는 사실상 특수화 문제에 가깝다. 오픈 월드 모델은 매번 처음부터 시작하는 대신, 공통 파운데이션을 각기 매우 다른 환경에 맞게 조정할 수 있는 유연성을 엔지니어링 팀에 제공한다.
물리 AI를 다른 AI 시스템과 구분 짓는 요소
물리 AI는 단순히 외형을 인식하는 것이 아니라, 결과를 이해하고 예측해야 한다. 이 차별점이 바로 월드 모델이 존재하는 이유다. 월드 모델은 물리적 환경이 어떻게 동작하는지 학습하고, 다음에 어떤 일이 일어날지 예측하며, 그 예측을 바탕으로 어떤 행동이 타당한지 파악하도록 훈련된다.
실무적으로, 이는 월드 모델이 객체가 어떻게 움직이고 상호작용하는지에 대한 물리적으로 타당한 데이터를 생성하고, 환경의 미래 상태를 시뮬레이션하며, 개발자에게 특정 로봇, 자율주행차 또는 비전 시스템에 맞게 파인튜닝할 수 있는 파운데이션을 제공한다는 의미다. 매번 새로운 사용 사례마다 방대한 양의 실제 세계 영상을 수집하는 대신, 팀은 월드 모델 시뮬레이션에 의존해 합성 학습 데이터를 생성하고, 실제 세계에 적용하기 전에 정책을 테스트할 수 있다. NVIDIA의 Omniverse 라이브러리는 Agent Toolkit의 일부로, 물리 AI 시스템을 실제 배포 전에 훈련·테스트·검증할 수 있는 시뮬레이션 준비 환경을 구축하기 위한 프리빌트 도구를 제공함으로써 이를 한 단계 더 확장한다.
NVIDIA Cosmos 3 내부: 새로운 오픈 물리 AI 파운데이션 모델
Cosmos 3는 물리 AI 개발을 오랫동안 지연시켜 온 단편화 문제에 대한 NVIDIA의 해답이다. 장면 이해, 데이터 생성, 행동 예측을 위해 별도의 모델을 유지하는 대신, 이제 개발자는 이 세 가지를 모두 처리하는 단일 오픈 모델 패밀리에 의존할 수 있다. NVIDIA는 Cosmos 3를 비전 추론, 월드 생성, 행동 예측을 하나의 시스템에 결합한, mixture-of-transformers 아키텍처 기반의 최전선 오픈 물리 AI 파운데이션 옴니 모델로 설명한다.
이 유연성이 핵심이다. 개발자는 Cosmos 3를 장면을 해석하는 비전-언어 모델로, 미래 상태를 예측하고 대규모 합성 학습 데이터를 생성하는 물리 기반 월드 시뮬레이터로, 또는 특정 로봇이나 차량을 위해 구축된 특화 월드 액션 모델의 백본으로 사용할 수 있다.
모든 배포 요구에 맞춘 모델 변형
Cosmos 3 패밀리는 성능과 하드웨어 풋프린트 간의 서로 다른 균형을 겨냥한 세 가지 크기로 제공된다.
- Cosmos 3 Super(64B)는 고정밀 월드 모델링을 위해 설계되었다.
- Cosmos 3 Nano(16B)는 효율적인 추론과 사후 학습을 위해 튜닝되었다.
- Cosmos 3 Edge(4B)는 온디바이스 비전 추론과 로봇 정책 배포를 위해 설계되었다.
Cosmos 3 Edge는 엣지 GPU에서도 구동할 수 있을 만큼 가볍고, NVIDIA에 따르면 NVIDIA RTX GPU, NVIDIA DGX 시스템, Jetson Thor 플랫폼을 포함한 NVIDIA Jetson 하드웨어 전반에 배포할 수 있다. 이러한 범위는 모든 것을 데이터 센터로 보내는 대신, 추론을 로봇이나 차량 자체에서 직접 실행해야 하는 기업에 중요하다.
다양한 작업에서의 벤치마크 리더십
여러 독립 벤치마크 평가에서 Cosmos 3는 현재 오픈 웨이트 기반 텍스트-투-이미지 및 이미지-투-비디오 생성 부문에서 Artificial Analysis 1위를 기록하고, 월드 생성 부문에서는 PAIBench 1위, Physics-IQ의 이미지-투-비디오 카테고리에서도 1위를 차지하고 있다. 로봇 정책 작업과 관련해서는 RoboLab 벤치마크에서 최고 점수를 기록한다. 또한 Cosmos 3 Super는 NVIDIA에 따르면 비전 이해를 위한 VANTAGE-Bench에서 가장 높은 순위를 차지한 오픈 모델이다.
이러한 순위는 Cosmos 3가 틈새 연구용 릴리스가 아니라, 오픈 물리 AI 모델을 구축하는 모든 이들에게 실질적인 기준점으로 자리 잡고 있음을 보여준다. NVIDIA의 더 넓은 물리 AI 스택은 로보틱스를 위한 Isaac GR00T, 자율주행차를 위한 Alpamayo, 비전 AI를 위한 Metropolis로 구성되어 있으며, Cosmos 3는 고립된 상태로 작동하는 것이 아니라 이미 특정 산업에 맞게 조정된 더 넓은 도구 세트로 연결된다.
산업 채택과 NVIDIA Cosmos Coalition
로보틱스, 자율주행차, 비전 AI 전반의 기업들은 이미 NVIDIA Cosmos를 기반으로 구축을 진행 중이며, 이는 이 모델 패밀리가 데모 단계를 넘어 실제 개발 파이프라인으로 진입하고 있음을 시사한다. 로보틱스 분야에서는 두산로보틱스, LG전자, 삼성전자, Skild AI 등이 NVIDIA가 채택 기업으로 언급한 이름들이다. 자율주행차 분야에서는 리오토(Li Auto), 샤오미(Xiaomi), Afari가 이 플랫폼과 함께 작업 중이다. 산업 모니터링 및 스마트 스페이스 시스템을 구동하는 비전 AI 애플리케이션의 경우, Centific, Fogsphere, Linker Vision, Milestone Systems, Yuan이 Cosmos를 기반으로 구축 중인 개발사로 지목된다.
이처럼 서로 매우 다른 세 산업에 걸쳐 확산되고 있다는 점은 왜 중요할까? 이는 단일 오픈 파운데이션 모델이 하나의 좁은 사용 사례에만 작동하는 것이 아니라, 진정한 공용 인프라로 기능할 수 있다는 신호이며, 이는 바로 올해 초 공개 서한에서 NVIDIA와 공동 서명자들이 제시한 주장과 정확히 맞닿아 있다.
NVIDIA Cosmos Coalition은 이러한 모멘텀을 유지하기 위한 메커니즘이다. 이 연합은 월드 모델 구축자, AI 개발자, 물리 AI 리더들을 한데 모아, 모델·연구·평가 방법론을 다시 오픈 생태계로 환류시키도록 한다. NVIDIA는 최근 이 연합을 일본으로 확장했으며, 그곳의 로보틱스 및 제조 리더들은 공장, 물류, 농업, 건설, 헬스케어, 교통 분야에 특화된 오픈 월드 모델을 공동 개발할 계획이다. 이미 진행 중인 산업 채택과 결합될 때, 이러한 확장은 오픈 모델 패밀리가 단일 기업의 독점적 베팅이 아니라 물리 AI를 위한 공용 파운데이션으로 자리 잡아 가고 있음을 보여준다.
FAQ
오픈 월드 모델이란 무엇이며, 왜 중요한가?
오픈 월드 모델은 어떤 인프라에서도 다운로드, 검토, 수정 및 실행할 수 있으며, 이를 통해 개발자는 특정 로봇, 차량 또는 비전 시스템에 맞게 물리 AI 애플리케이션을 특수화하는 데 필요한 커스터마이징을 수행할 수 있다.
물리 AI는 다른 유형의 AI와 무엇이 다른가?
물리 AI는 일반적인 비전 모델처럼 단순히 외형을 해석하는 데 그치지 않고, 실제 물리 환경에서의 결과를 이해하고 예측해야 한다.
NVIDIA Cosmos 3의 다양한 변형과 그 용도는?
Cosmos 3 Super(64B)는 고정밀 월드 모델링을 위해 설계되었고, Cosmos 3 Nano(16B)는 효율적인 추론과 사후 학습을 위해 설계되었으며, Cosmos 3 Edge(4B)는 Jetson Thor 하드웨어를 구동하는 로봇을 포함해, 경량 엣지 GPU 배포를 위해 설계되었다.
NVIDIA Cosmos Coalition은 물리 AI 개발을 어떻게 지원하는가?
이 연합은 전 세계 월드 모델 구축자와 AI 개발자 간의 협업을 촉진하며, 최근에는 일본의 로보틱스 및 제조 리더들을 포함하도록 확장되어, 물류부터 헬스케어에 이르는 다양한 분야를 위한 오픈 월드 모델을 개발할 계획이다.
{“@context”:”https://schema.org”,”@type”:”FAQPage”,”mainEntity”:[{“@type”:”Question”,”name”:”오픈 월드 모델이란 무엇이며, 왜 중요한가?”,”acceptedAnswer”:{“@type”:”Answer”,”text”:”오픈 월드 모델은 어떤 인프라에서도 다운로드, 검토, 수정 및 실행할 수 있으며, 이를 통해 개발자는 특정 로봇, 차량 또는 비전 시스템에 맞게 물리 AI 애플리케이션을 특수화하는 데 필요한 커스터마이징을 수행할 수 있다.”}},{“@type”:”Question”,”name”:”물리 AI는 다른 유형의 AI와 무엇이 다른가?”,”acceptedAnswer”:{“@type”:”Answer”,”text”:”물리 AI는 일반적인 비전 모델처럼 단순히 외형을 해석하는 데 그치지 않고, 실제 물리 환경에서의 결과를 이해하고 예측해야 한다.”}},{“@type”:”Question”,”name”:”NVIDIA Cosmos 3의 다양한 변형과 그 용도는?”,”acceptedAnswer”:{“@type”:”Answer”,”text”:”Cosmos 3 Super(64B)는 고정밀 월드 모델링을 위해 설계되었고, Cosmos 3 Nano(16B)는 효율적인 추론과 사후 학습을 위해 설계되었으며, Cosmos 3 Edge(4B)는 Jetson Thor 하드웨어를 구동하는 로봇을 포함해, 경량 엣지 GPU 배포를 위해 설계되었다.”}},{“@type”:”Question”,”name”:”NVIDIA Cosmos Coalition은 물리 AI 개발을 어떻게 지원하는가?”,”acceptedAnswer”:{“@type”:”Answer”,”text”:”이 연합은 전 세계 월드 모델 구축자와 AI 개발자 간의 협업을 촉진하며, 최근에는 일본의 로보틱스 및 제조 리더들을 포함하도록 확장되어, 물류부터 헬스케어에 이르는 다양한 분야를 위한 오픈 월드 모델을 개발할 계획이다.”}}]}
이 기사는 인공지능의 도움을 받아 제작되었으며, 편집팀의 검수를 거쳤습니다.
