LifeVal: 일상생활에서 AI의 과업 수행 능력을 측정하는 벤치마크

핵심 발표

• 일상생활의 실질적 과업에서 AI 지원 수준을 측정하는 LifeVal 벤치마크 공개
• ChatGPT를 대화 도구에서 에이전트형 개인 비서로 확장하기 위한 성능 평가 목적

연구 방법·결과

• American Time Use Survey와 Multinational Time Use Study를 바탕으로 일상 과업 후보 도출
• 인구통계학적으로 대표성 있는 응답자 3,995명 대상 설문을 통해 개인 비서 지원 수요 파악
• 돌봄, 건강, 교육, 가정 관리, 개인 재정, 쇼핑, 정부 서비스 접근 분야 과업 포함
• 유치원 비교 93.1%, 홍수 대비 자원봉사 관리 98.0%, 주택 탐색 100% 등 사례별 현재 모델 성과 제시

개발자 영향

• 브라우저 사용, 컴퓨터 사용, 커넥터 과업의 속도·역량·정렬 개선 추적
• 지식 중심 학술 평가를 넘어 의사결정과 일상 책임 관리, 실질적 작업 완료 성과 측정 지향

한계·주의점

• 사례별 점수는 일부 개별 워크플로의 결과이며 전체 과업 성능을 대표하는 수치로 제시되지 않음