본문 바로가기
급상승 이슈진행 중

DeepL Voice, 감정과 억양을 반영하는 새 모델

보도 1건출처 1곳2시간 전 업데이트

지금까지의 흐름

보도 발췌

기존 DeepL Voice는 대화 시작 시 확보한 고정 음성 샘플로 번역 음성을 생성했다. 그래서 대화 중 기분 변화나 비꼬는 말투를 포착하지 못했다. Aure는 번역 텍스트와 원래 음성을 대화 진행에 맞춰 지속적으로 분석하는 방식으로 이 한계에 대응한다. 학습 단계에서는 목소리의 개성, 말하기의 억양, 내용을 분리해 각각 별도로 새로운 언어에 옮길 수 있도록 했다. 또한 강화학습을 통해 출력에 억양이 섞이지 않도록 했다. 제공 개시 시점의 지원 언어는 영어, 독일어, 스페인어, 프랑스어, 이탈리아어, 일본어, 포르투갈어, 한국어 8개다. DeepL Voice for Online Meetings, In-Person Conversations, DeepL API에서 Aure가 자동으로 사용된다.

The Decoder 발췌

보도 타임라인

보도를 따라가며 이슈의 여러 측면을 살펴보세요.

11월 11일
  1. The Decoder
    DeepL、음성 번역 모델 Aure 도입…말투와 감정을 번역 언어에 반영

    DeepL은 신규 모델 Aure를 발표했다. DeepL Voice의 실시간 번역에서 화자의 말투, 감정, 강조, 말하는 속도를 번역 대상 언어에 이어받을 수 있게 했다. Aure는 일본어를 포함한 8개 언어를 지원하며, Online Meetings, In-Person Conversations, DeepL API에서 자동으로 작동한다.

이 이슈의 화제도 추이

추이를 그릴 만큼 연속 관측 데이터가 아직 부족합니다.