Hugging Face Daily Papers·· 11일 전AI 점수29
AMBIT, 실행 가능한 ScenePlan과 자기 증류 Transfusion으로 공간 음향 생성·편집
Spatial Audio Generation and Editing with Executable Plans and Self-Distilling Transfusion
AI 요약
AMBIT는 1차 앰비소닉스(FOA) 공간 음향을 생성·편집하는 통합 프레임워크로, 자기회귀적 장면 계획과 rectified-flow 기반 렌더링을 결합했다. 계획은 음원의 내용, 활동, 3D 궤적을 기술하는 ScenePlan이며, 편집 시에는 변경할 부분과 유지할 음원을 지정하면 참조 음성이 나머지 음향 세부를 보완한다. 음성, 음악, 음향 평가에서는 비교 대상 베이스라인에 비해 생성 내용과 공간 품질, 지시 기반 편집 시의 음향 충실도, 편집하지 않은 음원의 보존이 개선된 것으로 보고됐다.
출처: Hugging Face Daily Papers · huggingface.co