Guijin Son

🏷️ 인물 LLM AI평가

손귀진(Guijin Son)은 한국어 LLM 평가 분야에서 가장 활발히 활동하는 연구자 중 한 명이다. 서울대학교 소속이며, 오픈소스 한국 NLP 연구그룹 HAE-RAE의 리드이자 OnelineAI의 공동창업자다.

대표 작업은 한국어 LLM 평가 표준이 된 KMMLU(35,030문제, 45개 과목)와 HAE-RAE Bench다. KMMLU는 영어 벤치마크의 단순 번역이 아니라 한국 시험·자격증에서 직접 수집한 문제로 구성해 한국어·한국 문화의 특수성을 반영한 것이 특징이다. HAE-RAE Bench는 LREC-COLING 2024에 채택됐고, KMMLU는 NAACL 2025에 채택됐다.

2025년에는 LLM이 다양한 차원을 평가하도록 설계된 BiGGen Bench로 NAACL 2025 Best Paper Award를 수상했다. 같은 해 KMMLU-ReduxKMMLU-Pro, 그리고 한국어 LLM 평가를 통합한 HRET 툴킷까지 연이어 발표했다.

2026년에는 Seungone Kim, Catherine Arnett, Sean Welleck, Graham Neubig, Akari Asai 등과 함께 SOOHAK(연구 수준 수학 벤치마크, 1,141문제, 수학자 105명 동원)의 1저자를 맡았다. 한국어 텍스트 평가에서 시작해 수학·과학 같은 도메인 평가로 영역을 넓혀가는 궤적을 보이고 있다.