Audio Interaction Model (사전)

Audio Interaction Model은 실시간 음성 입출력을 지원하는 멀티모달 모델입니다. 사용자의 음성 질문을 직접 처리하고, 음성으로 응답을 생성합니다.

특징:

• 저지연 음성 처리: 스트리밍 오디오 입력 지원, 지연 최소화
• 자연스러운 음성 생성: 단순 텍스트-음성 변환이 아닌 모델 기반 음성 출력
• 멀티턴 대화: 문맥을 유지하면서 음성 대화 지속
• 음성 감정·톤 인식: 음성 특성(감정, 속도, 톤)을 이해

최근 Claude Opus, GPT-4o, Gemini-2.5 Pro 같은 주요 VLM들이 음성 상호작용을 추가하면서, 문서 질의응답도 음성 인터페이스로 확장되는 추세입니다. MinerU2.5 같은 문서 파싱 모델과 결합하면, "이 표의 B열 평균은?" 같은 음성 질문을 직접 처리할 수 있는 에이전트를 구성할 수 있습니다.