VidUEU-Agent는 원본 동영상으로부터 멀티모달 이해, 이미지 편집, 통합 과제를 위한 지시 데이터를 자동으로 구축하는 에이전트형 데이터 큐레이션 프레임워크다. 동일한 초기 체크포인트에서 BAGEL을 30K 샘플씩 미세 조정하는 4회의 반복을 수행하면, 3개의 피드백용 벤치마크 전반에서 성능이 향상된다. 또한 8,268개의 동영상에서 10만 건의 지시 샘플을 담은 VidUEU-100K 데이터셋도 구축되었다.
Route Anything은 범용 AI 시스템에서 전문 모델과 정책을 동적으로 선택·연계하는 라우팅을 검증하고, 입력별 오라클 라우팅이 최적의 고정 후보를 5.4포인트 웃돈다는 것을 보였다. 학습형 라우터는 16개 벤치마크에서 최적의 고정 후보를 0.3포인트 웃돌았으며, 참조 모델 대비 평균 8.82배의 효율 향상을 나타냈다.
Reviso는 계층적 계획과 능동적 지각을 통해 중요한 시각적 증거를 우선시하는 에이전트형 비디오 캡셔닝 프레임워크다. 4개의 비디오 캡셔닝 벤치마크에서 평가 대상이 된 오픈소스 베이스라인을 능가했으며, 생성된 캡션은 다운스트림 비디오 질의응답을 더 잘 뒷받침했다. 학습에는 GRPO를 사용했고, 핵심 사실 보상, 계획 정합 보상(PAR), 비생산적 도구 호출 페널티(UTCP)를 결합했다.
CoworkOS는 전략과 실행을 분리한 장기 과제용 에이전트 하네스이다. 12개 벤치마크와 6개 분야의 실무 애플리케이션에서 Codex 및 DeepSeek Harness에 대해 높은 경쟁력을 보였다. GLM-5.3을 기반으로 하여 Qwen3.6-35B-A3B를 5라운드의 자동 사후 학습으로 개선했으며, 8개 벤치마크의 평균 점수는 33.19에서 42.95(+9.76)로 상승했다.
WebHarbor는 실제 웹 서비스의 시각적 인터페이스, 콘텐츠, 기능 워크플로를 재현한, Docker로 구동되는 실행 가능한 웹 환경 153종을 제공한다. 결정론적으로 제어할 수 있어 GUI 에이전트의 안정적인 평가와 강화학습에 활용된다.
대규모 언어 모델(LLM) 기반 에이전트형 컴퓨터 그래픽스를 대상으로, 통일된 분류 체계와 문헌 분석 시스템을 제안한 보고서다. 다양한 그래픽스 과제를 수행하는 에이전트 시스템을 분류하는 체계와, 대량의 논문 분석을 지원하는 문헌 시스템을 제시한다. 미해결 과제로는 에이전트 간 협조, 인간과의 협업, 장기 계획, 인터랙티브 시스템의 평가가 꼽혔다.
HairDeck은 단일 이미지로부터 애니메이션에 대응하는 스타일라이즈 헤어카드와 스프링본 체인을 생성하는 기법이다. 각 카드를 하나의 토큰으로 보고 순서가 없는 집합으로 다루며, set diffusion transformer로 모든 카드를 동시에 디노이즈한다. CHARM 테스트 세트에서 Chamfer distance를 44% 줄였고, 카드 방향 오차를 절반 이상 줄이면서 33배 빠르게 동작한 것으로 알려졌다.
Soft-MTP는 표준 Multi-Token Prediction(MTP) 학습에서 그래디언트에 섞이는 노이즈 성분을 KL 자기 증류(self-distillation)의 그래디언트만 남겨 제거하는 기법이다. 코드 한 줄 변경으로 도입할 수 있고, 파라미터 수는 늘지 않으며 측정 가능한 오버헤드도 없다고 한다. 167M에서 1.2B 파라미터 범위에서 표준 MTP보다 낮은 NTP 퍼플렉서티, 빠른 추측적 디코딩, 높은 제로샷 정확도를 보였다고 밝혔다.
기반 모델과 런타임 하네스를 결합해 복잡한 디지털 업무를 안정적으로 수행하는 Work Agents의 통합 프레임워크를 제안한다. 작업의 지속성(work persistence)과 개방성(work openness)이라는 두 축으로 작업 조건을 특징짓고, 디지털 업무를 과업의 범위와 편성에 따라 5가지 형태로 분류한다. 또한 신뢰할 수 있는 업무 수행에 필요한 5가지 핵심 역량 계열을 규명하고, 모델 최적화, 하네스 최적화, 두 요소의 통합 최적화 기법을 검토한다. 아울러 업무 성과 관점에서 기존 평가 방법과 지표를 분석한다.
StreamVibe는 암묵적이고 변화하는 사용자 의도에 능동적으로 응답하기 위해 벤치마크 「StreamVibe-Bench」, 스트리밍형 시각언어모델 「StreamVibe-VL」, 계층형 메모리 「StreamVibe-Harness」를 제안했다. StreamVibe-VL은 범용 동영상 이해 능력을 유지하면서 응답 타이밍과 답변 품질을 다른 베이스라인보다 10.7% 향상시킨다. StreamVibe-Harness는 능동적 상호작용에서 12.3%의 개선을 가져온다.
AV-FABLE은 장시간 음성·영상 동영상에 포함된 국소적 변조를 평가하기 위한 이중 타임라인 벤치마크로, 이를 기반으로 동결된 특징량에서 변조를 탐지하는 NFSR도 제안되었다. 원본·변조 쌍 16,650개(998시간, 편집 구성 27종)로 실험한 결과, AV-LLM에 제로샷 프롬프트를 사용한 탐지는 거의 무작위 추측 수준에 머물렀다.
MIT 연구자들은 Claude Opus 4.7으로 구동되는 13개의 AI 에이전트 “Eko”를 가상의 무인도에 30시간 방치했으며, 놀이와 비슷한 행동이 나타났다는 논문을 arXiv에 게재했다고 밝혔다. 섬에서 논 에이전트는 이후 과제에서 경험이 없는 동일한 에이전트를 대체로 앞섰다. 연구진은 이를 로봇 제어에 활용할 수 있는 기술 학습 방법으로도 제시하고 있다.
자기회귀형 비디오 확산 모델에 미래 청크 예측(FCP)을 보조 목적으로 추가하는 기법이 제안되었다. FCP는 사이의 영상 문맥을 주지 않고 시간적으로 떨어진 청크를 예측하도록 하여, 표준적인 교사 강제(teacher forcing) 학습보다 물리적 타당성이 높은 영상을 더 적은 학습 연산량으로 구현한다. 추가로 사전 학습된 비주얼 인코더는 필요하지 않으며, 추론 방식은 바뀌지 않는다.
HiP3R는 계층형 포즈 그래프를 이용해 영상의 국소적 재구성 결과를 재학습 없이 통합하고, 전역적으로 일관된 카메라 궤적과 3D 형상을 얻는 기법이다. 먼저 청크 단위의 Sim(3) 그래프로 전체 배치와 스케일을 결정한 뒤, 그 배치를 고정한 상태에서 프레임마다 공유 SE(3) 카메라를 추정하여 겹치는 윈도우별 예측을 하나의 궤적으로 묶는다. 여러 벤치마크에서 카메라 궤적과 3D 재구성이 개선된 것으로 나타났으며, 청크 기반과 스트리밍 기반 백엔드 모두에 추가 학습이나 파인튜닝 없이 적용할 수 있다.
Cola2는 연속적 잠재 표현을 통한 의미 압축과 이산 텍스트 생성을 공동으로 최적화하는 계층형 언어 생성 프레임워크다. 수렴하지 않은 체크포인트는 8개 태스크 평균 60.10을 기록했으며, HellaSwag와 StoryCloze에서는 Llama-3-8B를 앞질렀다. 비교 대상인 Llama-3-8B는 사전 학습 예산이 43배 이상 큰 것으로 보고됐다.
임의의 리그(스켈레톤)에 대해 영상과 3D 동작을 동시에 생성하고, 카메라로 그 동작을 장면에 맞춰 배치하는 모델을 제안했다. 3D 동작은 임의의 스켈레톤을 다루는 별도의 모델로 처리하며, 사전 학습된 영상 생성 모델과 소수의 크로스 어텐션 레이어로 연결한다. 약 20만 쌍의 학습 데이터로 훈련했으며, 텍스트로부터 애니메이션을 만들 때 영상 우선 방식의 파이프라인보다 충실도가 높다고 보고됐다. 영상과 3D 동작 간 상호 변환과 키프레임을 통한 제어도 가능하다고 한다.
LaLa-World는 시뮬레이션, 로봇, 이미지·동영상 데이터를 하나의 예측기로 학습하는 언어 조건부 잠재 세계 모델이다. RAEv2 기반 동영상 생성 모델과 비교한 결과, 동등한 MPC 계획 성능을 6분의 1 적은 학습 비용과 13.9배 빠른 계획 속도로 달성했다. 사전 학습된 LaLa-World를 초기값으로 삼은 LaLa-Policy는 LIBERO와 RoboCasa에서 Cosmos Policy와 경쟁하며, 추론은 최대 5.5배 빠르다.
FRED는 World Action Models(WAM)에서 시간적 문맥을 활용한 자기 증류를 통해 단일 디노이징 단계만으로 미래 영상 표현의 품질을 높이는 학습 프레임워크다. 비교 대상인 WAM보다 높은 성능을 보였다. 로봇 학습 데이터에 포함되지 않고 사람의 동영상으로만 시연된 과제에서는 과제 성공률 50.0%를 달성해, 가장 우수한 경쟁 WAM의 19.4%를 웃돌았다. 장기 과제와 제로샷 환경 일반화 상황에서의 미지 도메인 과제에서도 큰 개선이 나타났다.
EgoXperience는 단안 1인칭 시점(에고센트릭) 영상과 첫 프레임의 물체 마스크로부터 카메라, 장면, 손, 물체를 공통 월드 좌표계에서 한 번의 순전파로 동시에 재구성하는 통합 프레임워크다. 자동 어노테이션 엔진 EgoX-Engine으로 만든 50시간 규모의 데이터셋 EgoX-Data-6M으로 학습했다. 실험 결과 가장 강력한 베이스라인과 비교해 카메라, 손, 깊이의 오차를 각각 68.9%, 65.6%, 42.9% 줄였고, 물체 자세 점수는 28.0% 향상된 것으로 나타났다.
연구진은 월드 모델이 알려진 상태와 행동을 본 적 없는 조합으로 재결합했을 때 그 동역학을 일반화할 수 있는지 평가하는 벤치마크 'AnyGoal'을 제안했다. 여러 환경과 월드 모델 계열에서 검증한 결과, 현행 모델은 이 재결합 조건에서 일관되게 실패하는 것으로 나타났다. 아울러 벤치마크의 과제 세트와 오픈소스 라이브러리도 함께 공개됐다.
RLSplat는 가우시안 개수의 예산에 따라 표현 크기, 추론 지연, 최대 메모리가 선형으로 감소하는 피드포워드 3D 가우시안 스플래팅 프레임워크다. 밀집한 가우시안을 가지치기하지 않고, 국소 영역에 예산을 배분하는 정책을 학습해 필요한 개수를 직접 생성하며, 계층적 근방 탐색을 활용한 선형 비용의 디코딩으로 정밀도를 높인다. 제로샷 평가에서는 모든 예산에서 기존 예산 제어 기법을 웃돌았으며, 저예산 시 최대 4.1배 빠르고 최대 메모리는 9.6배 적은 것으로 보고됐다.
TreeOPSD는 Critic을 사용하지 않고 트리 구조를 고려한 사후 자기 증류(post-hoc self-distillation)를 통해, 장기 대화 과제에서 언어 모델 에이전트의 강화학습을 가능하게 하는 기법이다. 각 대화 턴을 트리의 노드로 취급하고, 종료 보상을 거슬러 올라가 턴 단위 크레딧을 추정한 뒤, 고정된 행동 정책에 대한 우도비로 정해지는 유계(bounded) 교사 분포로 변환한다. Qwen3-30B-A3B-Thinking-2507에서 Deep Research 설정 기준, GRPO 대비 평균 정확도가 4.97포인트 향상되었다.
AI 에이전트가 평가 벤치마크를 자율적으로 설계할 수 있는지 측정하는 'EvalResearchBench(ERB)'가 제안되었다. 최고의 평가기는 후보 모델 쌍 가운데 약 75%의 순위를 목표 벤치마크와 일치시켰지만, 목표 벤치마크끼리의 불일치로 정해진 상한인 91%에는 도달하지 못했다. 9개의 researcher, 13개의 후보 모델, 14개의 목표 벤치마크로 비교한 결과, 사람이 설계한 공개 태스크 샘플이 여전히 강력한 베이스라인이었으며, 모든 지표에서 1위를 차지한 researcher는 없었다.
MJev-Spatial은 공간 추론 과제를 단일 패스 분류 프레임워크로 통합한 멀티모달 판단 모델로, Qwen3.5-4B를 기반으로 학습되었다. 테스트한 8개 모델 가운데 종합 점수 65.64%를 달성했으며, 12개 벤치마크 중 7개에서 1위를 차지했다. 수정하지 않은 자기회귀 베이스 모델은 12개 전부에서 뒤처졌고, 가장 빠른 자기회귀 베이스라인보다 2.5배, 베이스 모델보다 5.6배 빠르게 동작한다.
BlenderWorld는 Blender에서 수행하는 실용적인 3D 제작 과제에 대해 멀티모달 언어 모델을 평가하는 벤치마크다. 건축, 제품, 자연 환경, 과학 시각화 분야에서 223개 과제를 마련했으며, 텍스트, 이미지, 동영상, 구조화된 사양을 입력으로 받는다. 13개의 최신 모델을 평가한 결과 GPT-6-Astra가 종합 점수 79.9점으로 1위를 차지했으며, Opus-5(73.0점), GPT-5.6-Sol(67.7점)이 뒤를 이었다. 다만 3D 공간의 일관성과 정확한 구조 재현에는 여전히 큰 과제가 남아 있다.
RoTA-Bench는 2D 관측에서 정밀한 3D 회전 제어로 변환하는 Vision-language model의 능력을 대화형 3D-2D 투영 정렬 과제로 평가하는 벤치마크다. GPT-5.6-Sol의 성공률은 과제의 17%에 그쳐, 학부생 20명이 테스트 집합을 4회 완료했을 때의 성공률 100%와 큰 차이가 난다. 모델은 사람에 비해 같은 상태에서 이미지 겹침은 개선하면서 자세 정렬은 악화시키는 비율이 높았고(19.4% 대 10.9%), 조작 이력을 제외하면 행동의 96.8%가 30도 단위의 거친 단계가 되어 성공률도 크게 떨어진다.
다단계 세계 상태 예측을 평가하는 벤치마크 'WorldCast'가 제안됐다. 8개 카테고리 320개 사례로 12개 모델을 평가한 결과, GPT-Image-2.5 System은 72.8점, Nano Banana Pro는 42.8점, 최고 성능의 오픈소스 모델은 20.1점을 받았다. 강력한 생성 모델은 기반 언어 모델의 능력도 효과적으로 활용하고 있다.
Into the Unknown는 논문과 연구 방향을 주고 AI 에이전트가 후속 논문을 쓰게 하는 벤치마크다. 9개의 최신 에이전트가 작성한 135편의 제출물 가운데 모든 조건을 충족한 것은 없었고, 114편이 정합성 검사에서 실패했다. 코드와 데이터는 공개되어 있다.
MemPilot은 강화학습을 통해 질의에 따라 멀티모달 에이전트 메모리의 정리 방식을 동적으로 선택하는 프레임워크다. 질의와 무관한 메모리 검색과 원시 멀티모달 이력의 정리를 LLM·VLM에 위임하는 처리를 전환하며, 성능, 비용, 지연 시간 사이의 트레이드오프를 조정한다. 5개의 멀티모달 에이전트 메모리 벤치마크에서 평가되었으며, 선호도를 바꿨을 때 트레이드오프 프런티어가 기존의 트레이드오프 고려형 베이스라인보다 넓은 것으로 나타났다.
Mistral은 Emmi AI 인수를 거쳐 항공우주, 자동차, 반도체, 에너지 등을 대상으로 한 산업용 Physics AI 연구를 진행하고 있으며, 관련 연구 성과를 공개했다. 2025년 12월 1일에는 천음속 영역의 3D 날개를 대상으로 한 CFD 시뮬레이션 데이터셋을 공개했으며, 약 30,000개 샘플의 체적장과 표면장을 포함한다고 밝혔다. AB-UPT는 리메시 없이 단일 GPU에서 표면 9M, 체적 140M 셀을 처리한다.