Hugging Face Daily Papers·· 2일 전AI 점수33
TurnWise, 턴 단위 보상 할당으로 스트리밍 영상 이해의 강화학습 개선
Turns Matter: Advancing Streaming Video RL via Turn-Level Credit
AI 요약
TurnWise는 스트리밍 영상 이해를 위한 강화학습 기법으로, 응답과 대기 판단 각각에 턴 단위로 학습 신호를 할당하는 GRPO 프레임워크다. 턴 내부와 턴 사이에서 평균을 내는 토큰 손실을 계산해, 응답과 대기 판단을 출력 길이와 관계없이 동등하게 가중한다. 학습된 critic이나 추가 롤아웃을 사용하지 않으며, 실험에서 기존 RL 기법을 웃돌았다고 보고되었다.
출처: Hugging Face Daily Papers · huggingface.co