홈
AI AI
속보
심층
이벤트
Pro
더보기
자금 조달 정보
특집
온체인 생태계
용어
팟캐스트
데이터
OPRR
简体中文
繁體中文
English
Tiếng Việt
한국어
日本語
ภาษาไทย
Türkçe
BTC
$96,000
5.73%
ETH
$3,521.91
3.97%
HTX
$0.{5}2273
5.23%
SOL
$198.17
3.05%
BNB
$710
3.05%
XRP
$2.25
2.07%
DOGE
$0.325
2.23%
USDC
$0.999
3.05%
Partnered With:

ARC-AGI-3 평가 기관, 규칙 변경 고려: 공식 순위에서 제조사가 자체 메모리를 허용할 수도

동차 Beating 모니터링에 따르면, ARC-AGI-3 평가 기관인 ARC Prize는 이전에 모든 모델이 동일한 간단한 호출 방식을 사용하도록 요구하여, 제조사가 맞춤형 프레임워크로 점수를 높이는 것을 방지했습니다. 이렇게 하면 모델 자체의 능력을 더 쉽게 파악할 수 있습니다.

OpenAI의 논란 테스트에 대응하며, 공식 입장이 다소 완화되기 시작했습니다. ARC Prize는 과거 추론 기록을 보존하고, 과도하게 긴 컨텍스트를 압축하는 것이 실제로 모델의 장기 작업 처리 성능을 향상시킬 수 있음을 인정했으며, 이러한 기능을 공식 평가에 포함시키는 방법을 연구하기 시작했습니다.

ARC-AGI 창립자 François Chollet이 제시한 경계는 다음과 같습니다. ARC를 위해 특별히 개발된 프레임워크는 여전히 허용되지 않습니다. 모든 API 사용자가 사용할 수 있는 일반 설정은 고려할 수 있습니다. 그는 각 업체가 어떤 설정을 사용했는지, 얼마나 많은 비용을 지출했는지 모두 공개되어야 한다고 생각합니다.

일단 제조사 자체의 메모리 및 컨텍스트 관리 기능이 허용되면, ARC-AGI-3는 더 이상 모델만 비교하는 것이 아니라, 각 API 뒤에 숨겨진 엔지니어링 역량까지 비교하게 될 것입니다.

举报 오류 신고/제보
오류 신고/제보
제출
새 문고 추가
자신만 보기
공개
저장
문고 선택
새 문고 추가
취소
완료