본문 바로가기
급상승 이슈지켜보는 중

Reframe: 관측 정합형 다중 교사 증류 기반 시각 에이전트 기법

보도 1건출처 1곳2일 전 업데이트

지금까지의 흐름

보도 발췌

Reframe는 시각 에이전트의 관측 상태를 정합시키는 2단계 사후 학습 프레임워크로, 14개의 이미지·동영상 벤치마크에서 Mix-RL 및 바닐라 MOPD를 능가했다. 1단계인 GD-GRPO는 증거를 고려한 보상과 원본 시각 입력의 확률적 제거를 통해, 결과 기반 GRPO에 비해 도구 반환 관측에 대한 의존도와 도구 이득을 높인다. 2단계인 OG-MOPD는 롤아웃 도중 불충분한 도구 행동을 표준 행동으로 교체하여 증류를 재개하며, 두 단계 모두 태스크별 SFT 콜드 스타트를 필요로 하지 않는다.

Hugging Face Daily Papers 발췌

보도 타임라인

보도를 따라가며 이슈의 여러 측면을 살펴보세요.

11월 9일
  1. Hugging Face Daily Papers
    Reframe: 관측 정합형 다중 교사 온폴리시 증류를 통한 에이전트형 시각 추론

    Reframe는 시각 에이전트의 관측 상태를 정합시키는 2단계 사후 학습 프레임워크로, 14개의 이미지·동영상 벤치마크에서 Mix-RL 및 바닐라 MOPD를 능가했다. 1단계인 GD-GRPO는 증거를 고려한 보상과 원본 시각 입력의 확률적 제거를 통해, 결과 기반 GRPO에 비해 도구 반환 관측에 대한 의존도와 도구 이득을 높인다. 2단계인 OG-MOPD는 롤아웃 도중 불충분한 도구 행동을 표준 행동으로 교체하여 증류를 재개하며, 두 단계 모두 태스크별 SFT 콜드 스타트를 필요로 하지 않는다.

이 이슈의 화제도 추이

추이를 그릴 만큼 연속 관측 데이터가 아직 부족합니다.