메타가 SAM 3.1을 API로 출시했는데, 천 장 이미지 분할에 단 2.5달러밖에 안 든다

동찰 Beating AI 속보, Meta가 비전 분할 모델 SAM 3.1을 공식적으로 Model API에 통합했습니다. 개발자가 이미지나 동영상을 입력하고 '빨간 자전거'와 같은 문구를 입력하면 해당 객체를 바로 찾아내고 바운딩 박스와 픽셀 단위 마스크를 반환합니다. 동영상에서는 동일한 대상을 끝까지 추적할 수 있어 자동 모자이크, 특수 효과 추가 등에 편리합니다.

Meta는 올해 3월에 이미 오픈 웨이트 버전의 SAM 3.1을 발표했습니다. SAM 3와 비교해 가장 큰 업그레이드는 Object Multiplex로, 이전에는 여러 대상을 하나씩 처리해야 했지만 이제 한 번에 최대 16개를 동시에 처리할 수 있습니다. Meta 테스트에서 H100 한 장이 다중 대상 동영상을 처리하는 속도가 초당 16프레임에서 32프레임으로 향상되었으며, 128개 대상을 추적할 때 속도는 SAM 3의 약 7배입니다.

이전에는 개발자가 직접 가중치를 다운로드하고 GPU와 배포 환경을 준비해야 했지만, 이제는 Meta가 호스팅하는 API를 바로 사용할 수 있습니다. 이미지 분할은 1000장당 2.5달러, 동영상은 1000프레임당 0.2달러가 부과되며, OpenAI SDK로도 바로 연동할 수 있습니다.

다만 API 버전은 현재 텍스트 프롬프트만 받으며, 오픈 웨이트 버전은 박스, 포인트 등 시각적 프롬프트로 대상 지정이 가능합니다. 동영상 API는 프레임당 최대 16개 객체를 추적합니다.