짐 판
개요
짐 판(Jim Fan, 논문에서는 Linxi Fan)은 NVIDIA의 AI 디렉터이자 Distinguished Research Scientist입니다. 일반 목적 로보틱스와 Physical AI 연구를 이끌며, 임바디드 에이전트를 연구하는 GEAR Lab(Generalist Embodied Agent Research)의 공동 창립자이자 리더입니다. 시뮬레이션과 실제 환경 양쪽에서 기계가 학습하고 행동하게 만드는 "Physical AGI"를 핵심 목표로 삼습니다.
스탠퍼드 대학교에서 박사 학위를 받았으며, OpenAI의 첫 연구 인턴 출신이라는 이력이 잘 알려져 있습니다. X(@DrJimFan)에서 수십만 명의 팔로워를 보유하며 AI 및 로보틱스 분야의 대중적인 목소리로도 활동합니다.
생애
짐 판은 스탠퍼드 대학교 컴퓨터과학과에서 박사 학위를 취득했습니다. 박사 과정 중 OpenAI의 첫 연구 인턴으로 참여하며 이름을 알렸습니다.
NVIDIA에는 2021년 리서치 사이언티스트로 합류했으며, 이후 시니어 리서치 사이언티스트(2023~2024), 시니어 매니저 겸 프린시펄 리서치 사이언티스트(2024~2025)를 거쳐 2025년 AI 디렉터이자 Distinguished Research Scientist로 승격되었습니다.
2024년 2월 동료 연구자 Yuke Zhu 교수와 함께 GEAR Lab(Generalist Embodied Agent Research)을 공동 창립했습니다. 같은 시기 NVIDIA의 휴머노이드 로봇 파운데이션 모델 프로젝트인 Project GR00T의 공동 책임자로도 선임되었습니다.
업적
짐 판의 대표 연구는 Minecraft 환경에서 범용 에이전트 역량을 탐구하는 MineDojo(2022)와 Voyager(2023)에서 시작됩니다. Voyager는 GPT-4를 기반으로 Minecraft 안에서 스스로 기술을 습득하고 라이브러리를 확장하는 첫 LLM 기반 임바디드 에이전트로, 임바디드 에이전트 연구에서 기념비적인 작업으로 평가받습니다.
2025년 3월 NVIDIA는 Isaac GR00T N1을 발표했습니다. 세계 최초의 오픈 소스 범용 휴머노이드 로봇 파운데이션 모델로, 멀티모달 입력(언어와 이미지)을 받아 다양한 환경에서 조작 작업을 수행합니다. 이후 GR00T N1.6이 추가 발표되어 실제 환경 적용성을 강화했습니다. 훈련에는 1억 프레임 이상의 모션 캡처 데이터와 128개 GPU에서 50만 개 이상의 병렬 로봇 시뮬레이션이 활용되었습니다.
밍유 리우가 이끄는 Cosmos Lab과 함께 NVIDIA의 Physical AI 연구의 양대 축을 이루고 있습니다. GEAR Lab에서는 Eureka(LLM 기반 보상 함수 자동 설계), VIMA, Prismer 등 다수의 영향력 있는 연구를 발표했습니다.
여담
짐 판은 AI 연구자이면서 동시에 뛰어난 커뮤니케이터이기도 합니다. 복잡한 연구 주제를 대중 언어로 풀어내는 능력이 뛰어나며, X와 각종 강연에서 Physical AGI의 비전을 적극 설파합니다. Sequoia Capital의 팟캐스트 Training Data에 출연해 "빠르게 생각하고 느리게 생각하는 로봇"을 주제로 대담을 나누기도 했습니다.
2024년 GEAR Lab 설립을 공개했을 때 "모든 움직이는 기계가 자율적이 될 미래를 믿는다"고 선언한 것이 널리 공유되었습니다. OpenAI 첫 인턴 출신이 NVIDIA에서 휴머노이드 로봇 연구를 이끌게 된 경로 자체가 AI 연구 생태계의 이동 궤적을 잘 보여주는 사례로 자주 인용됩니다.
주요 논문
- GR00T N1: An Open Foundation Model for Generalist Humanoid Robots (arXiv:2503.14734, 2025) — 세계 최초 오픈 휴머노이드 로봇 파운데이션 모델
- Voyager: An Open-Ended Embodied Agent with Large Language Models (2023) — LLM 기반 Minecraft 자율 학습 에이전트
- MineDojo: Building Open-Ended Embodied Agents with Internet-Scale Knowledge (NeurIPS 2022, 베스트 논문상) — 인터넷 지식 기반 임바디드 에이전트 플랫폼
- Eureka: Human-Level Reward Design via Coding Large Language Models (ICLR 2024) — LLM 기반 보상 함수 자동 설계
- VIMA: General Robot Manipulation with Multimodal Prompts (ICML 2023) — 멀티모달 프롬프트 기반 로봇 조작
- Prismer: A Vision-Language Model with an Ensemble of Experts (2023) — 전문가 앙상블 기반 비전-언어 모델
- Cosmos 3 - Omnimodal World Models for Physical AI — 행동을 언어·이미지·비디오와 동급 모달리티로 다루는 Physical AI 월드 모델