[논문] Phun‑Bench: LLM의 중국어 음운 이해 평가

출처: arXiv - 2606.07300v1

개요

언어는 사고의 매개체이며, 소리, 기호, 의미와 복잡하게 얽혀 있습니다. 그러나 대부분의 대형 언어 모델(LLM) 연구는 의미(semantics)와 기호(맞춤법)에 초점을 맞추고 소리 측면은 크게 간과하고 있습니다. 기존의 LLM 음운 능력 벤치마크는 암기식 해결이 가능하거나 다른 능력과 뒤섞여 있어, LLM의 진정한 음운 이해 능력을 측정하기에 충분하지 못합니다. 여기서는 동음, 운, 음성 유사성이라는 세 차원을 아우르는 다양한 과제와 설정을 갖춘 맞춤형 중국어 벤치마크 Phun‑Bench를 제시하여, LLM의 음운 이해를 체계적으로 평가합니다. 실험 결과, LLM은 올바른 발음을 기억하는 데는 뛰어나지만, 인간 화자처럼 유연하고 직관적으로 음운 지식을 활용하는 데는 전반적으로 어려움을 겪는 것으로 나타났습니다. 또한 상세 분석을 통해 LLM의 음운 이해 및 “지각” 메커니즘에 대한 가설을 제시하며, 향후 연구를 위한 미탐색 영역을 강조합니다.

주요 기여

이 논문은 다음 분야의 연구를 제시합니다.

• cs.CL

방법론

자세한 방법론은 전체 논문을 참고하십시오.

실용적 함의

본 연구는 cs.CL 분야의 발전에 기여합니다.

저자

• Xing Yue
• Yongliang Shen
• Weiming Lu

논문 정보

• arXiv ID: 2606.07300v1
• 분류: cs.CL
• 발표일: 2026년 6월 5일
• PDF: PDF 다운로드