Google, 70개 이상 언어를 지원하는 음성 번역 모델 Gemini 3.5 Live Translate 공개
Fluid, natural voice translation with Gemini 3.5 Live Translate
Google이 70개 이상 언어에서 거의 실시간으로 음성을 음성으로 번역하는 음성 모델 Gemini 3.5 Live Translate를 공개했다. 화자의 억양, 말하는 속도, 음높이를 유지한 자연스러운 번역 음성을 생성한다. 개발자를 위해 Gemini Live API와 Google AI Studio에서 퍼블릭 프리뷰로 제공되며, Google 번역 앱(Android, iOS)에도 적용이 시작됐다.
Gemini 3.5 Live Translate는 70개 이상 언어를 자동으로 감지하고 번역 음성을 연속적으로 생성한다. 화자가 말을 마칠 때까지 기다리는 턴제 방식과 달리, 품질 향상을 위한 문맥 대기와 동기화를 위한 즉시 번역 사이의 균형을 맞춰 화자보다 몇 초 정도 늦은 수준으로 음성을 계속 출력한다. 입력은 수동 설정 없이 다국어에 대응하며, 잡음에 강해 시끄러운 환경에서도 사용할 수 있다고 한다.
제공 형태는 세 가지다. 개발자에게는 Gemini Live API와 Google AI Studio에서 퍼블릭 프리뷰로, 기업에는 이번 달부터 Google Meet에서 프라이빗 프리뷰로, 일반 사용자에게는 Android와 iOS의 Google 번역 앱으로 제공된다. Agora, Fishjam, LiveKit, Pipecat, Vision Agents가 Gemini Live API를 통해 음성 번역 앱 구축을 지원한다. Grab은 운전자와 승객 간 다국어 소통에서 검증을 진행하고 있으며, 월간 음성 통화가 1,000만 건을 넘는다고 한다. CJ ENM과 LiveKit 등도 번역 품질, 정확도, 저지연에 대해 긍정적인 평가를 내놓았다.
Google Meet의 음성 번역은 기존 5개 언어에서 70개 이상으로 확대되며, 영어와의 사이에서만 가능했던 번역이 2,000개 이상의 언어 조합으로 넓어진다. 인터페이스도 업데이트된다. 일부 기업용 Google Workspace 고객에게는 이번 달부터 프라이빗 프리뷰로 제공되며, 폭넓은 확대는 올해 하반기에 이뤄질 예정이다.
Google 번역 앱에서는 Live translate 기능에 헤드폰만 연결하면 화자의 목소리 톤을 반영한 번역을 70개 이상 언어로 들을 수 있다. Android에서는 새로운 '리스닝 모드'도 순차적으로 제공되며, 통화하듯 기기를 귀에 대면 번역 음성이 본체의 이어피스에서 재생된다. 헤드폰이 없는 상황에서 주변에 들리지 않게 번역을 듣고 싶을 때 유용하다고 한다. 한편 모델이 생성하는 모든 음성에는 SynthID 워터마크가 삽입되어 AI 생성 콘텐츠를 식별할 수 있도록 했다.
개발자용 API, Google Meet, Google 번역 앱으로의 적용 범위가 한꺼번에 정리되어 있어 이용 경로를 비교하기 쉽다.
출처: Google DeepMind Blog · deepmind.google