簡易手機:為聽障人士設計的行動電話

研究人員開發出壓縮資料的軟體,允許使用即時影片透過手機傳遞手語。但美國手機公司會接受嗎?


關於支援科學新聞報道

如果您喜歡這篇文章,請考慮訂閱以支援我們屢獲殊榮的新聞報道。 訂閱。透過購買訂閱,您將幫助確保有關當今塑造我們世界的發現和想法的重要故事的未來。


在美國,手機的便利性和相對較低的成本使其成為生活中不可或缺的一部分。當然,除非您是該國大約3700萬聽障成年人中的一員。但是,西雅圖華盛頓大學(U.W.)的研究人員希望透過開發一款軟體來改變這一現狀,該軟體允許呼叫者使用即時影片透過手機上的手語進行交流,而不是僅限於簡訊。

目標:聽障人士將能夠使用蜂窩網路上的影片流撥打或接聽電話,以交換手語訊息。一些國家/地區(包括瑞典和日本,3G(第三代,更高頻寬)網路無處不在)正在嘗試這些功能;在美國卻並非如此,美國的無線寬頻服務覆蓋範圍直到最近才開始與歐洲的手機服務相媲美。這意味著:大多數美國手機網路缺乏處理流媒體影片所需的頻寬。因此,手機制造商沒有提供許多具有足夠處理能力來流暢執行影片的型號,並且美國手機中的數碼相機位於顯示屏的另一側(這將使得在交換手語時無法看到線路另一端的人)。

華盛頓大學電氣工程教授伊芙·里斯金及其同事正專注於資料壓縮,這是允許影片在較慢的網路上流動並在功能較弱的手機上顯示的關鍵。里斯金說,該小組的MobileASL(美國手語)軟體對影片資料的編碼量幾乎是以前的兩倍,從而壓縮了這些資訊,“使其佔用更少的空間,並減少了對網路的干擾。”

研究人員能夠透過他們稱之為“皮膚對映”的演算法來實現高壓縮率,該演算法可以分析畫素顏色以區分影像中人的臉部和手部。由於這些是傳達手語的影像中最重要的部分,因此代表這些區域的資料將以全部解析度傳送(從而獲得更高的解析度),而代表背景和影片幀其他無生命部分的一些資料包將被丟棄,從而獲得較低的解析度。

參加該專案的華盛頓大學研究生蔡載洪(音譯)說:“為了節省電池壽命,減少網路上傳送的資料包數量,並提高手語方面的質量,我們開發了基於皮膚圖和幀丟棄的ROI(感興趣區域)編碼,如果使用者沒有打手語。”

里斯金及其同事利用國家科學基金會(NSF)超過460,000美元的資助開發了MobileASL,以建立在較低頻寬下實現更高質量影片的演算法。她說:“我們想知道我們是否可以在手機上做到這一點。” 研究人員在YouTube上釋出了一個網路影片,演示了透過Wi-Fi網路連線的MobileASL手機,因為當前的蜂窩網路無法支援流媒體影片。

自2月份以來,研究人員一直在兩款HTC(高科技電腦)公司的TyTN II手機上測試他們的MobileASL軟體。這些手機在美國可以透過AT&T購買,但在歐洲更常見,每部售價900美元,並且攝像機與影片螢幕位於同一側,這允許呼叫者在使用手語通話時觀察線路另一端的人的反應。MobileASL在執行Microsoft Windows Mobile作業系統的手機上執行,可以自動檢測到呼叫者何時正在使用手語,並提高其在網路上傳送和接收資料的速度。(當沒有人打手語並且數碼相機拍攝的大部分影像都是無生命的物體時,該軟體會降低位元率以節省電池電量。)

可以一隻手拿著MobileASL手機,另一隻手打手語,但是使用該手機的最佳方法是將其放在平面上,以防止可能降低質量的移動。“您希望儘可能減少移動,因為移動會影響處理資料所需的時間,並且需要更多的頻寬,”密歇根州立大學電信,資訊研究和媒體教授凱莉·希特說。希特是該校研究團隊的成員,該團隊於1996年推出了ASL瀏覽器,這是一個提供數千個將單詞翻譯成ASL符號的影片的網站。

里斯金將使用國家科學基金會的第二筆贈款(這次價值45萬美元)在明年進行更廣泛的研究,該研究將包括大學生和從大西雅圖地區招募的精通ASL的參與者。20位參與者中的每一位都將收到一部手機,很可能是HTC TyTN II,因此研究人員可以研究他們如何使用其手語功能以及使用頻率。儘管大學參與者將使用學校的Wi-Fi網路進行通話,但研究人員尚未確定如何為校外參與者提供網路服務。

研究人員希望在六個月內透過網路向聽障人士提供他們的軟體,並從長遠來看,說服AT&T、Verizon Wireless、Sprint或T-Mobile等蜂窩網路提供商將MobileASL作為其服務的一部分。里斯金說,在美國使用MobileASL的最佳方法是讓手機公司將該演算法放入他們的手機中,並透過他們的網路傳送ASL影片。

© .