RESEARCH (연구)
구글 딥마인드, 수어를 글로 바꾸는 'SL2T' 모델… 청각장애인용 기능에 탑재
구글 딥마인드가 수어를 글로 옮기는 'SL2T(sign-language-to-text)' 모델을 공개하고, 처음으로 연구실 밖 실제 제품에 넣었습니다. 픽셀 11의 Gboard와 실시간 자막(Live Transcribe)에서 미국 수어(ASL)를 영어 글로 바꿔, 농인 사용자가 타이핑 대신 휴대폰에 수어로 입력할 수 있게 했습니다. 개인정보 보호를 위해 영상 대신 몸의 관절 위치 좌표만 서버로 보냅니다.
핵심 사실 · 한눈에 보기
- 8월 12일 구글 딥마인드가 수어→텍스트 번역 모델 SL2T를 발표했습니다.
- SL2T는 픽셀 11의 Gboard 수어 입력과 Live Transcribe에 들어갔고, 미국 수어(ASL)→영어부터 시작합니다.
- 50개 넘는 수어로 된 10만 시간 이상의 데이터로 학습했고, 이 중 약 4분의 1이 ASL입니다.
- 기기 안 모델(MediaPipe Holistic)이 손·몸의 위치 좌표만 뽑아 서버로 보내고, 원본 영상은 바로 버린다고 밝혔습니다.
- 딥마인드는 ASL→영어 평가 FLEURS-ASL에서 제로샷 BLEURT 70점으로 지금까지 보고된 최고 점수를 냈다고 밝혔습니다.
무엇을 할 수 있나
듣는 사람이 받아쓰기로 말해서 입력하듯, 농인 사용자가 타이핑하던 곳 어디서나 휴대폰에 수어로 입력할 수 있습니다. 웹 검색, 메시지·문서 작성, Gemini에 질문이나 작업 지시가 가능하고, 실시간 자막 앱에서는 대화 중 답을 타이핑 대신 수어로 할 수 있습니다. 시험 사용자들은 ASL로 입력하는 것이 영어로 타이핑하는 것보다 빠르고 자연스럽다고 했습니다.
- 제공: 픽셀 11 Gboard 수어 입력, Live Transcribe
- 언어: ASL→영어부터. 다른 기기와 언어는 '곧'
- 개인정보: 영상 대신 관절 좌표만 전송, 원본 영상 즉시 폐기
- 번역 방식: 중간 표기(글로스) 없이 좌표에서 바로 문장으로
AI마중 POINT · 해석
봐야 할 지점
딥마인드는 수어 AI가 더뎠던 이유로 두 가지를 짚었습니다. 수어는 영어를 손으로 옮긴 것이 아니라 고유한 문법과 어휘를 가진 독립 언어라 진짜 '번역'이 필요하고, 손·팔·몸통·머리·얼굴의 동시 움직임을 높은 프레임으로 읽어야 하는 어려운 시각 과제라는 것입니다. 수어 장갑 같은 초기 시도가 한계에 부딪힌 이유이기도 합니다.
SL2T의 선택은 여러 수어를 함께 학습시키는 것이었습니다. 다양한 언어·방언·숙련도를 함께 배우면 공통 구조를 익혀 단일 언어 모델보다 낫다는 결과를 얻었다고 밝혔습니다. 기기 안에서 좌표만 뽑아 보내는 설계는 수어 사용자의 얼굴과 주변이 담긴 영상이 서버로 가지 않게 하는 개인정보 보호 장치입니다.
그래서 나한테는?
누구에게 의미가 있나
- 미국 수어 사용자: 픽셀 11에서 수어로 입력하고 대화할 수 있습니다.
- 한국 수어 사용자: 발표 시점 제공 언어는 ASL→영어뿐이며, 한국수어 지원 여부와 일정은 나오지 않았습니다. 학습 데이터 50여 개 수어에 한국수어가 포함됐는지도 발표에서 확인되지 않습니다.
- 접근성 개발자: 영상 대신 좌표를 쓰는 방식은 개인정보 보호와 성능을 함께 노리는 설계 사례로 참고할 만합니다.
미확인 · 공식 발표만으로 알 수 없는 것
남은 질문
- 다른 기기·언어로의 확대 일정은 '곧'이라고만 했습니다.
- 실제 대화 환경에서의 번역 정확도, 특히 표정 같은 비수지 신호를 얼마나 반영하는지는 이 글 요약 범위에서 수치로 확인되지 않습니다.
SOURCE공식 원문 확인
- PRIMARY · 공식Putting sign language AI into users’ handsGoogle DeepMind · deepmind.google · 발표 2026.08.12 · 확인 2026.10.05
수집 2026.09.30 · 정리 2026.10.01 · 수정 2026.10.05 · 원문 본문은 옮기지 않았습니다. 회사가 밝힌 수치·성능은 본문에서 출처를 붙여 구분했습니다.