차이위쥔

🏷️ 인물 딥러닝 교수

개요

차이위쥔(Cai Yujun, 영문 별칭 Vanora Cai)은 호주 University of Queensland 전기컴퓨터공학부 강사(Lecturer, 조교수급)입니다. 멀티모달 이해, 비전-언어 모델, 그리고 트러스트워디 AI를 핵심 연구 축으로 삼고 있으며, 3D 인체 자세 추정에서 출발해 비전-언어 모델 보안과 멀티모달 추론으로 연구 영역을 확장해 온 인물입니다.

Google Scholar 기준 피인용 수는 약 4,400회를 상회하며, 멀티모달 인식과 비전-언어 모델을 대표 전문 분야로 명시하고 있습니다. 산업계와 학계를 오가며 Meta Reality Labs에서 실세계 데이터 규모의 연구를 경험한 뒤 교수직으로 전환한 경력을 갖고 있으며, 박사과정생과 인턴을 모집하는 활성 연구 그룹을 운영 중입니다.

2026년 가을부터는 홍콩 대학교(HKU) 컴퓨팅데이터과학부에 테뉴어 트랙 조교수로 합류할 예정입니다. 2026년 CVPR 튜토리얼 "세계 모델(World Models)의 멀티모달 추론에서의 부상"에 초청 연사로도 참여하는 등 해당 분야에서 영향력 있는 신진 연구자로 입지를 굳혀가고 있습니다.

생애

중국 동남대학교(Southeast University) 학부를 졸업한 뒤 싱가포르 난양공과대학교(NTU) 컴퓨터공학과에서 박사 학위를 받았습니다. NTU에서는 Tat Jen Cham, Jianfei Cai, Junsong Yuan, Nadia Magnenat Thalmann 네 명의 교수가 공동 지도하는 이례적인 형태로 박사 연구를 수행하였으며, 2021년 학위를 마쳤습니다. 박사과정에서는 3D 인체 자세 추정과 공간-시간 그래프 합성곱 네트워크를 주로 연구하였습니다.

졸업 후 페이스북(Facebook)에서 연구원으로 근무하였고, 이후 Meta Reality Labs 시니어 리서치 사이언티스트(Seattle)로 2022년부터 2023년까지 재직하였습니다. 2024년 11월부터는 University of Queensland 전기컴퓨터공학부 강사로 학계에 정착하였습니다. 별도로 Ant Group USA에서 Staff Research Scientist 겸직을 유지하고 있으며, 2025년에는 CVPR 2026, AAAI 2025, NeurIPS 2025, ICCV 2025 등 주요 학회의 Area Chair를 맡았습니다.

Meta에서의 경험은 수십억 명 규모의 사용자 데이터와 실세계 멀티모달 시스템 운용을 직접 다뤄 본 경험으로, 현재의 트러스트워디 AI 연구에 실용적 감각을 더하고 있습니다. University of Queensland 재직 중에도 CVPR 2025, EMNLP 2025, COLING 2025, NAACL 2025 등 주요 학회에 학생 논문을 게재하며 연구 그룹을 빠르게 성장시켰습니다.

업적

박사 시절 대표작은 ICCV 2019에 발표한 "Exploiting Spatial-Temporal Relationships for 3D Pose Estimation via Graph Convolutional Networks"입니다. 그래프 합성곱 네트워크를 이용해 비디오 시퀀스 속 인체 관절의 공간-시간 관계를 모델링함으로써, 당시 3D 자세 추정 벤치마크에서 유의미한 성능 향상을 달성하였습니다. 이어 NeurIPS 2021에서는 여러 카메라 시점을 직접 활용하는 다시점 다인 3D 자세 추정 연구를 발표하며 자세 추정 분야에서 주목받았습니다.

이후 멀티모달 인식으로 연구 방향이 이동하였습니다. "LLMs are good action recognizers"(CVPR 2024)에서는 대형 언어 모델이 행동 인식 태스크에서도 강력한 성능을 발휘할 수 있음을 보였습니다. 2025년에는 비전-언어 모델 보안 쪽으로 연구를 확장하여, 멀티 손실 적대적 탐색을 통한 VLM 탈옥 공격을 다루는 논문을 CVPR 2025에 발표하였습니다. 같은 해 ACL 2025에서는 "DRS: Deep Question Reformulation with Structured Output"을 발표하며 자연어 처리 영역에서도 존재감을 나타냈습니다.

2026년에는 웹 에이전트의 메모리 능력을 체계적으로 측정하는 LongMemEval-V2(arXiv 2605.12493)에 공저자로 참여하는 등, 멀티모달 에이전트와 메모리 평가 분야로도 연구를 넓히고 있습니다. ICCV 2025 튜토리얼 "비전-언어 모델의 포괄적 추론"에도 초청 연사로 참여했으며, Neurocomputing의 부편집장(Associate Editor)도 겸직하고 있습니다.

여담

차이위쥔의 NTU 박사과정은 지도교수가 4명이었다는 점에서 독특합니다. Tat Jen Cham(컴퓨터 비전), Jianfei Cai(비디오 분석), Junsong Yuan(행동 인식), Nadia Magnenat Thalmann(가상인간)으로 구성된 공동 지도 체계는 그가 특정 분야에 국한되지 않고 폭넓은 시각을 갖게 된 배경으로 작용했을 것으로 보입니다.

Meta에서 학계로 역방향 이동을 택한 것도 눈에 띕니다. 대규모 산업 연구 환경에서 확보한 데이터 접근성과 공학적 직관을 대학 연구실의 자유도와 결합하는 전략으로, University of Queensland에서 박사과정생과 인턴을 적극적으로 채용하며 연구 그룹을 키워가고 있습니다. 2026년 가을 홍콩 대학교(HKU)로의 이직은 연구 환경의 추가 업그레이드로 볼 수 있습니다.

본명 외에 Vanora라는 영문 별칭을 연구 전반에서 일관되게 사용하며, 이메일 주소와 개인 홈페이지(vanoracai.github.io)에도 이 별칭이 쓰입니다.

주요 논문