본문 바로가기
원문
Hugging Face Daily Papers·· 9일 전AI 점수28

LOWN, 확산형 VLM 디코딩에서 필요한 때만 이미지를 처리하는 기법

Look Only When Needed: Certificate-Guided Visual Routing for Efficient Diffusion VLMs

AI 요약

LOWN은 확산형 비전-언어 모델(DVLM)의 디코딩에서, 이미지 없이 한 예측이 직전의 이미지 포함 예측과 일치하면 이미지 처리를 생략하는 기법이다. LLaDA-V에서 10개 벤치마크 점수의 99.6%를 유지하면서도 디코딩 FLOPs는 평균 35.3%로 줄였다. 학습이나 임계값 조정이 필요 없으며, LLaDA 계열 DVLM에도 적용할 수 있다. 시각 토큰 가지치기와 함께 쓸 수 있고, KV 캐시 환경에서도 동작한다.

출처: Hugging Face Daily Papers · huggingface.co