近期,科技界傳來一則創新消息,英偉達公司聯合美國聾童協會(ASDC)及數字代理公司Hello Monday,共同推出了一款名為Signs的AI平臺,該平臺專注于美式手語(ASL)的學習與應用推廣。
ASL作為一種復雜的語言形式,結合了手勢、面部表情及空間定位等元素,這一特性使得AI模型在理解手語時面臨巨大挑戰。傳統的AI技術大多僅依賴手部追蹤,往往忽視了面部表情等非手勢信號的細微變化,導致識別效果有限。
Signs平臺打破了這一局限,它并非一個靜態的手語詞典,而是通過用戶貢獻的視頻數據不斷學習和優化。用戶提交的真實ASL手勢視頻被用作訓練AI模型的材料,這一做法旨在提升AI對手語識別的準確性、可擴展性,以及對自然手語風格的深入理解。隨著用戶數據的積累,平臺的識別能力將不斷增強。
該平臺的核心亮點之一在于其提供的實時AI反饋功能。用戶可以通過攝像頭進行手語表達,系統隨即分析手勢并提供即時糾正。同時,一個3D虛擬人物會演示正確的ASL手勢,便于用戶直觀對比學習,這一功能極大地促進了學習效率。
英偉達的目標遠不止于此,他們致力于構建一個能夠理解自然使用狀態下ASL的AI模型,而非僅僅依賴于僵化、預定義的動作。目前,Signs平臺的數據集已包含40萬個視頻片段,涵蓋了1000個手語單詞。英偉達計劃進一步向更廣泛的受眾開放平臺,以擴大數據集規模,并公開部分數據集,支持無障礙應用領域的深入研究。