Apple Machine Learning Research·· 3일 전AI 점수40
실기기 iOS 앱의 UI 내비게이션을 학습하는 온라인 강화학습 에이전트
Online Dense Reinforcement Learning with Planning-Grounding Agent for UI Navigation on Live iOS Apps
AI 요약
Planning agent와 UI Grounding model로 나눈 8B 규모 UI 내비게이션 에이전트를 실기기 iOS 앱에서 온라인 강화학습으로 직접 학습시키는 방법이 제안되었다. 보상은 LLM-as-a-Judge에 의한 단계별 평가와 최종 과제 완료 보상을 결합했으며, PPO와 GiGPPO로 최적화한다. Android 환경으로의 일반화에서는 SFT 베이스라인 대비 약 7배의 개선을 보였고, 실기기 iOS 앱에서는 Gemini-3.5-Flash를 웃돌고 Gemini-3.1-Pro와 동등한 성능을 기록했다.
출처: Apple Machine Learning Research · machinelearning.apple.com