台灣脈絡

Google Pixel首度導入SL2T手語轉文字AI

已沉寂
1報告2篇2家追蹤自
AIDeepMindGooglePixel 11SL2T手語
初始報導
重點摘要
  • Pixel 11系列首度支援手語轉文字AI功能
  • 核心技術為DeepMind開發的SL2T模型
  • 整合於Gboard鍵盤與即時轉錄功能
  • 使用者可直接用手語搜尋、寫訊息或向Gemini提問
  • SL2T訓練資料逾10萬小時,涵蓋50多種手語[1]
  • 團隊針對左撇子與單手比手語情境優化[1]
  • 開發過程有聾人社群全程參與
  • 首波支援ASL轉英文,未來擴展更多語言
展開完整內容

(綜合中央社、ETtoday新聞雲等2家媒體報導)

Google於今日硬體新品全球發表會上宣布,首度將「手語轉文字AI」導入消費性裝置,旗艦機Pixel 11系列率先支援美國手語(ASL)轉換為英文文字。此功能由Google DeepMind開發的SL2T(Sign Language-to-Text)模型驅動,整合於Gboard鍵盤與即時轉錄(Live Transcribe)中。

使用者可在搜尋網路、撰寫訊息或文件,以及向Gemini提問等情境下,直接對著手機比手語,系統即時轉換為文字。在即時轉錄功能中,使用者也能以手語回應對話,減少雙方來回打字的溝通障礙。

Google DeepMind指出,SL2T訓練資料超過10萬小時,涵蓋50多種手語,其中約四分之一為ASL。模型需同時處理手部、手臂、軀幹、頭部與臉部動作等高速視覺資訊,與語音轉文字處理聲音序列的邏輯不同。團隊針對實際使用情境進行調整,包括降低翻譯延遲、避免無手語動作時產生錯誤結果,以及改善左撇子與單手比手語的辨識效果[1]。

在FLEURS-ASL測試中,SL2T取得70 BLEURT分數,表現優於過去公開結果[1]。

Google執行長皮查伊(Sundar Pichai)表示,此功能與聽障社群合作開發,可協助ASL使用者更順暢地與不懂手語的人交流[2]。開發過程從研究、資料蒐集到測試,均有聾人社群參與;團隊亦成立AI Sign Language Advisory Committee(AISLAC),邀請全球聾人組織提供意見[1]。

Google DeepMind表示,未來將擴展至更多裝置,並支援更多語言。長期目標是讓手語在數位環境中的使用能力達到與口語及書面語言同等程度[2]。

本事件已沉寂,相關脈絡見「相關事件」