谷歌DeepMind发布手语转文字模型SL2T，已接入Pixel 11的Gboard输入法和Live Transcribe应用，首发支持美国手语转英文。

核心功能

  • 用户对着手机镜头打手语，即可完成搜索、发消息、输入文档

  • 可直接向Gemini语音助手提问


技术细节

  • 训练数据超10万小时，覆盖50多种手语，其中约四分之一为美国手语

  • 手机端仅提取手、脸、身体姿态坐标并发送服务器翻译

  • 原始视频不会上传，保障用户隐私