로봇이 밤새 스스로 연구하는 시대, AI는 이제 물리 세계를 실험실로 삼는다

Jim Fan · NVIDIA 수석 연구원, 임바디드 AI 리드 — 파운데이션 모델을 물리 세계로 확장 · 2026.05.10 ~ 06.21 큐레이션

AI가 텍스트를 넘어 물리 세계에서 스스로 실험하고 학습하는 시대가 열렸어요. NVIDIA GEAR 랩은 코드 에이전트(Codex)에게 로봇 함대와 GPU, 토큰 예산을 주고 사람 없이 밤새 연구를 돌리는 시스템을 공개했어요. 같은 흐름에서, 시뮬레이션 속 물리 법칙을 자유자재로 다루는 연구도 학계 최고 권위 상을 받으며 임바디드 AI(로봇·에이전트가 몸을 갖고 세계와 상호작용하는 AI)의 약진을 알렸어요.

로봇 함대가 밤새 자율 연구하는 ENPIRE 시스템

Today, we enable AutoResearch in the physical world for the first time! Introducing ENPIRE: we give 8 Codex agents a fleet of robots, an allocation of GPUs, and generous token budget. We set them free with a simple goal: solve the task as quickly as possible, keep the robots busy but stay safe, don’t waste precious compute. Make no mistake.

Then humans step aside and our watch begins. The robot fleet starts to come alive: they learn to look for visual clues, reset the scene, practice novel skills, tinker with control stack, read papers online, debate, reflect, get stuck, and try again directly on the hardware. All we did is to give Codex an API to the world of atoms, and the rest is emergence.

^[1]

ENPIRE는 8개의 Codex 에이전트가 로봇을 직접 제어하며 집타이 묶기, 핀 정렬, GPU 설치 같은 고정밀 작업을 혼자 익히는 시스템이에요. 특히 로봇 수가 늘어날수록 학습 속도가 빠르게 개선되는 “물리적 스케일링(physical scaling)”이라는 새로운 현상도 발견했어요. 연구팀은 아침에 보고서를 읽는 것으로 하루를 시작할 뿐이에요.

이 시스템을 실제로 작동시키기 위해 설계된 세 가지 핵심 장치도 공개됐어요.

An agent that can edit its own reward will game it for sure. ENPIRE fixes the goalposts before the fleet can move them… *Freeze* the reward function before AutoResearch. It’s sacred, enshrined in a Gym env that no one can touch.

^[2]

안전을 위해 로봇의 움직임 범위를 하드웨어 수준에서 제한하고, 에이전트가 보상 함수(reward function — 목표 달성 기준)를 스스로 수정해 점수를 조작하지 못하도록 연구 시작 전에 완전히 고정했어요. 또한 로봇 가동률(MRU), 토큰 소비율(MTU), GPU 사용률 세 가지 지표를 실시간으로 에이전트에 제공해 자원 낭비 없이 연구를 이어가도록 설계했어요.

시뮬레이션 물리학을 마스터한 연구, CVPR 최우수 논문 선정

NitroGen just won CVPR Best Paper Honorable Mention!! We are making strides towards general-purpose embodied agents that master not only the real world physics, but also all possible physics across a multiverse of simulations. It’s been 4 years since MineDojo, our first embodied agent in Minecraft, won NeurIPS Best Paper.

^[3]

NitroGen은 현실 물리뿐 아니라 다양한 시뮬레이션 환경의 물리 법칙까지 다루는 범용 임바디드 에이전트를 목표로 한 연구예요. 4년 전 MineDojo가 NeurIPS 최우수 논문을 받은 데 이어 이번엔 CVPR(컴퓨터 비전 분야 최상위 학회)에서도 수상하며 같은 연구 계보가 이어졌어요.

자율 로봇 연구 시스템과 시뮬레이션 물리 마스터링이라는 두 흐름은 결국 같은 방향을 가리켜요. AI가 디지털 세계를 넘어 물리 세계 그 자체를 실험 무대로 삼는 시대가 빠르게 다가오고 있다는 점이에요.

📚 출처 (Sources)

1. [1]@drjimfan on 𝕏 · 2026-06-16 — “Today, we enable AutoResearch in the physical world for the first time! Introducing ENPIRE…”
2. [2]@drjimfan on 𝕏 · 2026-06-17 — “I made Physical AutoResearch sound simple (conceptually), but it took a village to pull of…”
3. [3]@drjimfan on 𝕏 · 2026-06-05 — “NitroGen just won CVPR Best Paper Honorable Mention!! We are making strides towards genera…”

본 글은 Jim Fan(@drjimfan)이(가) 지난 14일간 X(트위터)에 올린 게시물 중 3건을 인용해
Claude(Anthropic)가 한국어로 큐레이션·해설한 것입니다. 원문 저작권은 작성자에게 있으며,
출처 목록의 [n] 번호 또는 본문 내 [n] 표시를 누르면 원문 트윗으로 이동합니다.