동찰 Beating AI 속보, OpenAI가 LifeVal이라는 새로운 평가 세트를 발표했습니다. 일반인이 생활 속 잡무를 처리하는 데 AI가 도움을 줄 수 있는지专门测试하는 것입니다. 유치원 찾기, 장보기, 정부 복지 신청, 병든 가족 돌보기까지 현실에서 단계적으로 처리해야 하는 일들을 시험합니다.
테스트 내용을 정하기 위해 OpenAI는 각국 주민의 일상생활과 시간 배분 조사 데이터를 참고했고, 3995명을 찾아가 AI가 가장 도와주길 원하는 일이 무엇인지 물었습니다. LifeVal은 이를 통해 육아, 의료, 쇼핑, 재테크, 교육 등의 분야를 포괄합니다.
OpenAI가 공개한 성적에 따르면 GPT-5.2의 평균 점수는 49.3%였고, GPT-6 Astra는 80.6%까지 향상되었습니다. 다만 발전은 주로 초기에 집중되었습니다. GPT-5.4가 이미 73%에 도달했고, GPT-5.6은 80%, 최신 Astra는 그것보다 0.6%포인트 높은 데 그쳤습니다.
공식 측은 또한 몇 가지 고득점 사례를展示했습니다. 예를 들어 한 가족의 집 찾기를 도와 100점을 받았습니다. AI는 예산과 통근 요건에 맞는 매물을 찾았고, 부동산 거래세도 계산했으며, 관련 서류를 장바구니에 담아 사용자가 검토할 수 있게 했습니다. 이사 후 유치원 선택에서는 93.1점을 받았는데, AI가 세 곳의 후보 학교를 추려내고 입학 정보를 정리했습니다.
LifeVal은 이전에 이미 모델 개선을 지도하는 데 사용되었으며, 현재도 OpenAI가 직접 설계하고 평가하는 내부 테스트 세트입니다.