Ming-Yu Liu

🏷️ 멀티모달 딥러닝

Ming-Yu Liu는 NVIDIA의 Research 부사장(VP of Research)이자 IEEE Fellow입니다. NVIDIA에서 Deep Imagination Research 그룹과 Cosmos Lab을 이끌며, 기계가 세상을 인식하는 것을 넘어 시뮬레이션하고 추론하며 상호작용하게 만드는 월드 파운데이션 모델(world foundation model)을 연구합니다.

그의 그룹이 만든 대표 산출물로는 NVIDIA Cosmos, 그림 생성 도구 Canvas(GauGAN), 영상 도구 Maxine(LivePortrait)이 있습니다. 학계에서는 이미지 변환과 생성 모델 분야의 다수 논문으로 알려져 있으며, GAN 기반 이미지-투-이미지 변환 연구가 널리 인용됩니다.

Cosmos 3 - Omnimodal World Models for Physical AI에서는 Cosmos Lab의 책임자로서 프로젝트 전체 방향을 이끌었습니다. "장면이 어떻게 보이는가"가 아니라 "기계가 어떻게 움직이는가"를 모델링한다는 Cosmos의 문제의식이 그의 연구 철학을 그대로 반영합니다. Sanja Fidler, Jan Kautz, Jim Fan과 함께 NVIDIA의 Physical AI 연구를 구성하는 핵심 인물입니다.