홈
AI AI
속보
심층
이벤트
Pro
더보기
자금 조달 정보
특집
온체인 생태계
용어
팟캐스트
데이터
OPRR
简体中文
繁體中文
English
Tiếng Việt
한국어
日本語
ภาษาไทย
Türkçe
BTC
$96,000
5.73%
ETH
$3,521.91
3.97%
HTX
$0.{5}2273
5.23%
SOL
$198.17
3.05%
BNB
$710
3.05%
XRP
$2.25
2.07%
DOGE
$0.325
2.23%
USDC
$0.999
3.05%
Partnered With:

더우바오 음성·영상 통화 모델 API 개방: AI가 보면서 듣고 말할 수 있으며 먼저 말을 걸기도 한다

동찰 Beating AI 속보, 11월 19일, 화산엔진이 두바오 실시간 오디오·비디오 모델 SeedRealtime 1.0의 API를 공식 개방했다. 이 모델은 올해 8월 이미 두바오 앱에 출시되었으며, 이제 서드파티 개발자도 이 실시간 영상 통화 기능을 자사 제품에 접목할 수 있게 되었다.


SeedRealtime은 카메라 화면, 소리, 시간 순서를 하나의 엔드투엔드 모델에 통합한다. AI는 관찰하면서 동시에 사용자의 말을 듣고, 언제 말을 시작해야 할지 판단하여 기존의 음성 인식, 시각 이해, 음성 합성 등 여러 모듈을 직렬로 연결할 때 발생하는 지연과 정보 손실을 줄인다.


공식 시연에서 사용자가 커피 원두를 통째로 커피머신의 추출 핸들에 쏟아붓자, AI는 질문을 기다리지 않고 먼저 갈아야 한다고 능동적으로 알려주었다. 박물관을 관람할 때 사용자가 찾고자 하는 유물을 미리 말해두기만 하면, 모델이 지속적으로 카메라를 관찰하다가 목표물이 나타났을 때 능동적으로 알려준다. 또한 여러 사람의 대화를 구분하여 시끄러운 환경에서 옆 사람의 잡담에 잘못 반응하는 것을 방지한다.


바이트댄스가 올해 8월 공개한 인공 평가에 따르면, 여러 모델을 직렬로 연결한 방식에 비해 SeedRealtime의 오디오·비디오 대화 리듬 문제가 약 절반가량 줄었으며, 말 끊기, 응답 지연, 배경 소음으로 인한 오작동 등의 현상이 현저히 감소했다.

举报 오류 신고/제보
관련추천
백팩 창업자 아르마니가 CFTC DCM 및 DCO 라이선스를 취득했다고 발표하며, 미국에서 솔라나 기반 파생상품 거래 플랫폼과 청산 기관을 출시할 예정이다. 그들은 이미 미국 주식 토큰화를 실현했으며, 전통 증권사 계좌와 솔라나 지갑 간에 자유롭게 입출금이 가능하고, 현재 솔라나에서 일부 주식 거래량이 NYSE와 NASDAQ을 초과했다. 향후 1만 개 주식으로 확장하고 RFQ, Intents 등의 컴포넌트를 통해 네오 브로커리지 시대를 구축하여 솔라나가 전체 금융의 API가 되도록 할 것이다.
오류 신고/제보
제출
새 문고 추가
자신만 보기
공개
저장
문고 선택
새 문고 추가
취소
완료