동찰 Beating AI 속보, Anthropic이 Claude Fable 5.2와 Mythos 5.2를 출시했다. 두 모델은 과거 전문 팀이 장기간 수행해야 했던 엔지니어링 및 과학 연구 프로젝트를 수행할 수 있게 되었으며, 여기에는 운영체제를 처음부터 개발하고, 수학 정리를 형식적으로 증명하고, 오랫동안 미해결이었던 블랙홀 이론 문제를 해결하는 것이 포함된다.
Anthropic은 Fable 5.2가 빈 폴더에서 시작해 운영체제를 개발하도록 했다. 1000개 이상의 하위 에이전트를调度하며 8일 연속 작업했고, 스스로 역할을 분담하고 프로그래밍, 테스트, 코드 리뷰를 수행했다. 최종적으로 만들어진 시스템은 노트북에서 부팅할 수 있으며, 독립적인 커널, 디스크 및 네트워크 드라이버, 파일 시스템, 그래픽 창 및 설치 프로그램을 갖추고 있다.
또 다른 실험에서 약 1000개의 Fable 5.2 에이전트가 30시간 동안 페르마의 대정리에 대한 기존 증명을 형식화하는 작업, 즉 수학적 증명을 컴퓨터가 단계별로 검증할 수 있는 코드로 변환하는 작업을 완료했다. 이전에 Anthropic은 전용 도구와 인간 연구원의 도움으로 같은 작업을 완료하는 데 11일이 걸렸다. 동일한 구성에서 Opus 5.5는 약 30시간 동안 실행하여 26%만 완료했다.
Fable 5.2는 또한 블랙홀 이론의 미해결 수수께끼 두 가지를 해결하는 데 참여했다. 그중 하나는 2003년에 제기되었고 이전까지 완료하기 어려웠던 복잡한 계산과 관련되어 있다.
Anthropic은 또한 Fable 5.2가 세 가지 전자 기기를 독립적으로 설계하도록 했으며, 여기에는 회로 기판, 부품, 외장 및 프로그램이 포함된다. 협력사의 엔지니어가 설계에 따라 제조 및 조립한 후 세 기기 모두 회로 수정 없이 정상적으로 작동했다.
공식 평가에서 Fable 5.2는 FrontierCode 2.0 프로그래밍 테스트에서 49.1%를 달성하여 Opus 5.5의 45.5%를 초과했다. 로봇 시뮬레이션 테스트는 이전 세대의 27.6%에서 64.9%로 향상되었다. Mythos 5.2는 사이버 보안 및 생물학 연구를 대상으로 하며, 알려진 취약점 재발견 테스트에서 89.6%를 달성했고 이전 세대는 78.3%였다.
Fable과 Mythos는 동일한 모델 가중치를 사용하며, 주요 차이는 안전 제한에 있다. Fable은 모든 사용자에게 공개되고, Mythos는 사이버 보안 및 생물학 연구 제한을 완화했으며 현재 심사를 통과한 기관에만 제공된다.
Anthropic은 또한 AI 칩 커널 최적화 및 모델 아키텍처 개선 등의 작업에서 모델의 훈련 발전을 주도적으로 제한하여 이 부분의 능력을 대략 Opus 5.5 수준으로 유지하도록 했으며, 이는 AI가 더 강력한 AI 개발을 가속화할 위험을 줄이기 위해서다.
API 가격은 백만 입력 토큰당 8달러, 출력 40달러로 이전 세대보다 20% 인하되었으며, 생성 속도는 최대 30% 향상되었습니다. Anthropic은 여전히 일반 프로그래밍 및 일상 지식 작업에는 Opus 5.5를 우선 사용할 것을 권장하며, Fable과 Mythos는 주로 복잡하고 장기적으로 운영되는 기술 프로젝트를 대상으로 합니다.
