구글이 수어를 입력기로 바꾼다: Pixel 11은 카메라를 향하면 바로 타이핑이 가능하다

동차 Beating 모니터링에 따르면, 구글 딥마인드가 수어-텍스트 변환 모델 SL2T를 출시하고 이를 Pixel 11의 Gboard와 Live Transcribe에 탑재했습니다. 최초로 미국 수어를 영어로 변환하는 것을 지원합니다. 사용자가 휴대폰을 향해 수어를 하면 검색, 메시지 작성, 문서 입력은 물론 Gemini에게 직접 질문할 수도 있습니다.

SL2T는 10만 시간 이상의 데이터로 훈련되었으며, 50여 가지 수어를 지원하고 그중 약 4분의 1이 미국 수어입니다. 휴대폰은 먼저 손, 얼굴, 신체의 자세 좌표를 추출하고, 좌표만 서버로 전송하여 번역하며, 원본 영상은 업로드되지 않습니다.