OpenAI 전 CTO의 신생 기업, 첫 번째 모델 Inkling 오픈소스 공개… 아키텍처는 DeepSeek-V3에서 영감

동차 Beating 모니터링에 따르면, OpenAI 전 CTO 미라 무라티가 설립한 Thinking Machines Lab이 최초의 범용 모델 Inkling을 출시했습니다. 모델의 총 파라미터는 9750억 개이며, 매번 활성화되는 파라미터는 410억 개로 텍스트, 이미지, 오디오를 지원하고 최대 컨텍스트 길이는 100만 토큰입니다.

Inkling은 처음부터 훈련되었지만, MoE 아키텍처는 주로 DeepSeek-V3를 참고했습니다. 후기 훈련 초기에는 Kimi K2.5 등 오픈 모델에서 생성된 데이터도 사용되었습니다. 전체 가중치는 Hugging Face에 업로드되었으며 Apache 2.0 라이선스가 적용됩니다.

Thinking Machines는 Inkling이 현재 가장 강력한 모델이 아니라는 점을 명확히 인정했습니다. 이 모델은 맞춤화와 효율성에 중점을 둡니다. Terminal Bench 2.1에서 동일한 성과를 달성할 때, 사용된 토큰 수는 엔비디아 Nemotron 3 Ultra의 약 3분의 1에 불과합니다.