AGI가 전 인류에게 도움이 되려면 사람들에게 가장 중요한 일상 업무를 도와야 한다. 이에 따라 ChatGPT 사용자 수천 명의 피드백을 바탕으로, 사람들이 개인 비서에게 가장 많이 원하는 지원이 무엇인지 반영한 새로운 벤치마크 「LifeVal」을 개발했다. 대상은 육아 일정 조율부터 행정 서비스 이용, 개인 자산 관리까지 포함한다. 지난 1년 동안 LifeVal을 활용해 자사 모델이 이러한 일상 업무를 얼마나 잘 처리하는지 측정하고 개선해 왔다. https://openai.com/index/lifeval/
For AGI to benefit all of humanity, it should help people with the everyday tasks that matter most to them. So we built LifeVal, a new benchmark shaped by feedback from thousands of ChatGPT users on where they most want help from a personal assistant—from finding childcare to accessing government services to managing personal finances.
Over the past year, we’ve used LifeVal to measure and improve how well our models handle these everyday tasks.
https://openai.com/index/lifeval/
출처: OpenAI · x.com