페이하오

옥스퍼드대 박사후연구원으로 OATML 그룹의 Yarin Gal과 Big Data Institute의 Chris Holmes 양쪽에 소속돼 있습니다. 그 전에는 싱가포르국립대 시니어 리서치 펠로, Skywork AI 싱가포르와 SEA AI Lab 어소시에이트 리서처를 거쳤습니다.

연구 주제는 멀티모달 학습이고, 생성 모델·멀티모달 파운데이션 모델·에이전트·월드 모델링에 무게가 실려 있습니다. NExT-GPT: Any-to-Any Multimodal LLM(ICML 2024)의 공저자입니다. LLM에 멀티모달 어댑터와 여러 디퓨전 디코더를 붙여 텍스트·이미지·비디오·오디오를 임의 조합으로 입출력하는 시스템입니다.

Mental World Modeling의 교신저자입니다. 물리 예측에 갇힌 월드 모델에 심적 변수를 1급 상태로 넣자는 이 논문의 주장은 멀티모달 파운데이션 모델과 월드 모델링을 오간 이 사람의 이력에서 자연스럽게 나옵니다.