Qwen은 Qwen-Audio-3.1을 발표하고 ASR, TTS, Realtime을 전면 개편했으며, 음성 제작용 TTS-Next와 음성 이해용 ASR-Next를 추가했다. 5개 모델로 이해, 생성, 대화, 제작을 아우른다. 또한 가격도 인하해 TTS는 약 70%, Realtime은 약 85%, ASR은 최대 95% 낮아진다.
Qwen-Audio-3.1은 ASR, TTS, Realtime 3개 모델을 업그레이드하고 TTS-Next와 ASR-Next 2개 모델을 새로 추가한 5개 모델 구성이다. Qwen은 이를 이해, 생성, 대화, 제작을 갖춘 하나의 음성 스택으로 자리매김하고 있다.
ASR은 다국어와 방언 인식이 강화되었으며, 필러와 반복 표현을 자동으로 제거하는 폴리시 기능으로 정리된 전사문을 출력한다. ASR-Next는 화자 라벨, 타임스탬프, 정렬된 전사문을 갖춘 다중 화자 ASR을 지원한다. 감정, 환경음, 기계음도 이해하여 사운드 캡션, 이벤트 위치 특정, 음성 QA, 추론에 활용할 수 있다.
⚡ Meet Qwen-Audio-3.1! ASR, TTS & Realtime are fully upgraded, joined by two new models: TTS-Next for audio creation and ASR-Next for audio understanding.
Five models, one complete audio stack: understanding, generation, interaction & creation.
Plus big price cuts across the lineup: TTS ~70% off, Realtime ~85% off, and ASR up to 95% off.
Highlights: 🥳
- ASR: stronger multilingual & dialect recognition, plus native polishing that auto-removes fillers & repetitions for cleaner, more logical transcripts.
- ASR-Next: supports multi-speaker ASR with speaker labels, timestamps & aligned transcripts, and understands emotions, ambient & machine sounds for sound captioning, event localization, audio QA & reasoning.
- TTS: multilingual & dialect synthesis with natural cross-lingual voice transfer; control emotion, speed & style via simple instructions.
- TTS-Next: unified LM + diffusion framework generating voice, sound effects & background audio in one pass for audiobooks, podcasts, games & ads.
- Realtime: speak & listen at once with anytime interruption, just like a real call; it even slows down and responds empathetically when it senses a low mood.
Unlock the full potential of Qwen-Audio-3.1! 👇
- Blog: https://fun-resource-shanghai.oss-cn-shanghai.aliyuncs.com/cuijiayan.cjy/tmp/exp/qwen_audio_3_tts_blog_review_260918/index.shtml?Expires=2105366399&OSSAccessKeyId=LTAI5tQrCBwj82sVMCWoSmzE&Signature=9ZaZIEahoN41Zb9MFJjf34G%2BSCM%3D
- Qwen-Audio-3.1-ASR:
https://www.qwencloud.com/models/qwen-audio-3.1-asr-flash-filetrans
- Qwen-Audio-3.1-Realtime:
https://www.qwencloud.com/models/qwen-audio-3.1-realtime-plus
- More APIs: coming soon @qwen_cloud
출처: Qwen · x.com