동차 Beating 모니터링에 따르면, 모델 평가 기관 Artificial Analysis가 API 정확도 순위표를 출시했습니다. 동일한 오픈소스 모델을 테스트하여, 다른 서비스 제공업체로 전환했을 때 얼마나 많은 성능이 유지되는지 확인합니다. 첫 번째 배치에서는 GLM-5.2, gpt-oss-120b, DeepSeek V4 Pro를 테스트하며, 총 44개의 API 엔드포인트를 다룹니다.
서비스 제공업체에는 AWS, Microsoft Azure, Google Vertex, Cloudflare가 포함되며, Fireworks, DeepInfra, CoreWeave, SiliconFlow와 같은 AI 추론 플랫폼도 있습니다. Artificial Analysis는 공식 모델을 자체 배포하여 성적을 100%로 기록한 후, 동일한 문제로 각 API를 테스트합니다.
결과에 따르면, GLM-5.2의 최저 엔드포인트는 52%에 불과해 거의 절반으로 줄었습니다. gpt-oss-120b는 70%에서 101% 사이의 점수를 기록했습니다. DeepSeek V4 Pro는 가장 안정적이며, 9개 서비스 제공업체 모두 97%에서 107% 사이로, 공식 API 점수가 가장 높았습니다.
차이는 주로 양자화, 출력 길이, 추론 구성 및 도구 호출 처리에서 발생합니다. 동일한 모델 이름이라도 실제 성능이 완전히 다를 수 있으므로, API를 선택할 때 가격과 속도만 볼 수는 없습니다.