注目★★★★★DeepMind
手話を直接入力——DeepMind の SL2T モデル、Pixel 11 で初対応
30秒で把握
- 1DeepMind が手話テキスト翻訳 AI・SL2T を Pixel 11 に統合・100,000 時間データで 50+ 手話言語学習
- 2ASL→英語翻訳で過去最高スコア 70 BLEURT・検索・メッセージ・Gemini 操作が手話入力で可能
- 3Deaf コミュニティと共同開発・プライバシー保護・左利き・片手入力対応・今後追加言語・デバイス拡大予定
要約
DeepMind は手話をテキストに翻訳する AI モデル「SL2T (Sign Language-to-Text)」を開発し、Pixel 11 の Gboard と Live Transcribe に搭載した。100,000 時間以上・50 以上の手話言語のデータで学習したモデルで、アメリカ手話 (ASL) から英語への翻訳は FLEURS-ASL ベンチマークで過去最高の 70 BLEURT を達成した。ユーザーはスマートフォンに手話で入力でき、テキスト入力と同様に検索や文書作成、メッセージ送受信ができる。Deaf コミュニティとの共同開発により、左利きや片手入力にも対応し、プライバシーを保護するため映像ではなく姿勢座標のみをサーバーに送信する。
あなたへの影響
日本での対応は英語版後になる見通しだが、手話ユーザーが音声・テキストと同等に情報アクセスできる環境が整う可能性がある。
推奨：業務や教育の場で手話を主言語とするユーザーを迎える際、このような機能の有無が accessibility 要件になり得るため、対応デバイス・言語の拡大予定を追跡する価値がある。