한눈에

NVIDIA가 11월 9일 미국 오스틴에서 열린 로봇 학습 학회 CoRL에서 GR00T 2를 공개했다. NVIDIA Cosmos 위에 만든 공개 모델이다.

GR00T 2는 ‘월드 액션 모델’이다. 주변을 보고, 내 행동이 환경을 어떻게 바꿀지 예상하고, 여러 단계 작업을 정밀하게 해내는 걸 목표로 한다.

로봇 데이터와 사람 데이터를 함께 써서 훈련했다. 여기에는 NVIDIA가 공개한 사람 1인칭 영상 10만 시간이 들어갔다.

숫자로 보면

과제별 시범 없이 평가한 50개 과제 중 40개를 한 번 이상 해냈다.

과제마다 시범을 한 번만 보여 주면 평균 성공률 71%, 다섯 번이면 95%다.

사람 시범으로 배운 기술을 로봇 시범 없이 다른 로봇 몸으로 옮길 수 있다고 한다. AI 에이전트가 API로 기술을 차례로 부르고 실수에서 회복하게 할 수도 있다.

Jim Fan 기조연설

Jim Fan은 같은 날 ‘From Dreaming to Doing’이라는 기조연설을 맡았다. 월드 모델, 로봇 기초 모델, 휴머노이드 제어를 다룬다.

그는 미리 “진짜 로봇, 실시간, 끊김 없는 한 장면, 자율”이라고 예고했고, 당일 X에 유튜브 생중계 링크를 올렸다. 시연 내용 자체는 아직 확인된 글이 없다.

왜 중요한가

로봇은 데이터가 부족한 게 가장 큰 문제였다. 사람 영상으로 배우고 몸을 바꿔도 기술이 옮겨 간다면 그 벽이 낮아진다.

NVIDIA는 로봇 학습 도구 Isaac Lab 3.0도 함께 냈다. 에이전트가 훈련 환경을 빠르게 꾸리게 돕는다.