Apple Machine Learning Research·· 22일 전AI 점수27
음성 기반 모델의 언어 선택적 차원을 이용한 코드스위칭 검출
Code-Switching Detection via Language-Selective Dimensions in Speech Foundation Models
AI 요약
연구팀은 사전 학습된 음성 인코더의 언어 선택적 은닉 상태 차원을 활용해, 음성에서 직접 코드스위칭(발화 중 언어가 전환되는 현상)을 검출하는 경량 기법을 제안했다. CS-FLEURS의 14개 언어 쌍 실험에서 Whisper-small 인코더는 평균 F1 0.798을 기록해, CNN의 0.776과 단일 언어 식별용으로 학습한 HuBERT 선형 베이스라인의 0.751을 웃돌았다. 이 결과는 사전 학습된 음성 인코더가 코드스위칭 발화를 식별하는 데 필요한 정보를 이미 부호화하고 있음을 시사한다.
출처: Apple Machine Learning Research · machinelearning.apple.com