打破無聲世界 宣基中學生製手語翻譯手套

打破無聲世界 宣基中學生製手語翻譯手套

語言是溝通的基本方法,但一般常人難以熟悉多種語言,更遑論非用聆聽方式的手語。傳統多交由人們翻譯,基督教宣道會宣基中學(簡稱宣基中學)學生留意到當中不便,製作出手套充當翻譯機。

宣基中學三位受訪者分別是伍澤林、鍾浩輝和陳嘉龍,他們表示自小學已有接觸手語,他們留意到學習手語後,由於大部分人使用機會不高,要熟悉並不容易。加上他們留意到語言大多有變化,如英語就有分英式、美式等。進一步瞭解後,他們得知手語也有分多套語系,單是香港就有至少三種手語,他們相信要用手語至外地溝通並不容易,因此設計出一套手語翻譯系統。

手語翻譯手套歷經多次測試及改良,當初用了較大的 Arduino UNO 及面包板,效果並不理想。

手語翻譯手套歷經多次測試及改良,當初用了較大的 Arduino UNO 及面包板,效果並不理想。

千元電子零件製手套

設計初期,他們已意識到建立資料庫也是一個巨大的工作,因此他們將手語翻譯系統分成三個部分。第一部分是經由電子手套;第二部分是從電子手套建立的數據資料庫;第三部分是輸入及輸出的介面。簡單來說是經由手指彎曲度,加入手勢轉換角度和移動速度,得出一組14位的數字,然後透過藍牙傳送資料庫於資料庫中進行配對,最後顯示單字。

相片是最簡單的手語翻譯示範,單舉二指向前,其他手指屈曲,熒幕就會顯示「You」。

相片是最簡單的手語翻譯示範,單舉二指向前,其他手指屈曲,熒幕就會顯示「You」。

程式設計十分完善,會先檢查左右手是否連接,才開始執行。

程式設計十分完善,會先檢查左右手是否連接,才開始執行。

App 的輸入介面也十分簡潔,當取得 14 位一組數字後,就可儲存相關數據。

App 的輸入介面也十分簡潔,當取得 14 位一組數字後,就可儲存相關數據。

課堂學不到的知識

從事科研學習,與傳統學習活動的分別?鍾浩輝和陳嘉龍均表示尤其喜歡實體設計,畢竟設計不在限於手機內,用途更廣。伍澤林指出此類型的跨學科學習,走出了學習新領域,比較新鮮,也感實用。此外,三位表示此專案中,能學習的比傳統的多,也自行研習了很多過往沒有接觸的領域,如排版、手語等,學習方式沒有傳統框架的限制,成功感比傳統的大,無形中也激發了自主學習的興趣,他們直言通過此類型的學習,所學的絕對比課堂上多。此外,他們仍在改進 App,期望日後每個使用者也是開發者,可以協助建立資料庫,並會設計各類手語的共享資料庫。

通過科研學習,學生們學到課堂學不到的知識。

通過科研學習,學生們學到課堂學不到的知識。

使用 App Inventor 可製作出手語翻譯系統。

使用 App Inventor 可製作出手語翻譯系統。

電子手套元件介紹

電子手套由四部分電子零件所組成,包括Flex Sensor、MPU6050、Arduino Nano 和 Arduino HC-06。

Flex Sensor 是一條有彈性的金屬條,由於其彈性設計容許其屈曲,而通過換算可將其彎曲度仿如轉盤,真正作用與可變電阻相似,常見例子是音樂的大細聲變化調節。Flex Sensor 能感應 0 至 255 數值,學生們將之分為四組,代表手指能屈曲的情況。至於 Flex Sensor 的其他用途,暫時不算太多,外國有用作模擬機械手的開發,也有安裝於椅背上感受使用者是否坐下時間太長,還有就是用作音樂變化。

Flex Sensor 是一條有彈性的金屬條,由於其彈性設計容許其屈曲,而通過換算可將其彎曲度仿如轉盤,真正作用與可變電阻相似,常見例子是音樂的大細聲變化調節。Flex Sensor 能感應 0 至 255 數值,學生們將之分為四組,代表手指能屈曲的情況。至於 Flex Sensor 的其他用途,暫時不算太多,外國有用作模擬機械手的開發,也有安裝於椅背上感受使用者是否坐下時間太長,還有就是用作音樂變化。

使用 MPU6050 為核心晶片組,編號是 GY-521 的電子板。此電子板的特色之一是小巧,僅 2cm×1.6cm 左右,由於其內置 Digital Motion Processor(DMP)能力,也就是可運算三軸陀螺儀及三軸加速計算,從而計算出空間轉變的數值。此類型的運用,最著名的莫過於體感遊戲,如Wii、Switch,近年很多智能設備如 iPhone 等也陸續加入此晶片元組,以擴展硬件用途。

使用 MPU6050 為核心晶片組,編號是 GY-521 的電子板。此電子板的特色之一是小巧,僅 2cm×1.6cm 左右,由於其內置 Digital Motion Processor(DMP)能力,也就是可運算三軸陀螺儀及三軸加速計算,從而計算出空間轉變的數值。此類型的運用,最著名的莫過於體感遊戲,如Wii、Switch,近年很多智能設備如 iPhone 等也陸續加入此晶片元組,以擴展硬件用途。

除了 Arduino UNO,Arduino 也有推出其他類型的電子版。同學們表示手語翻譯手套需要將電子硬件,直接依附在手套的手背上,因此電子板必然是輕巧為佳,再三比較下,選擇體積和連接介面較少的 Arduino Nano。

除了 Arduino UNO,Arduino 也有推出其他類型的電子版。同學們表示手語翻譯手套需要將電子硬件,直接依附在手套的手背上,因此電子板必然是輕巧為佳,再三比較下,選擇體積和連接介面較少的 Arduino Nano。

Arduino 電子板各具功能,上述的 Nano 和 UNO,大多會作運算使用,但缺點是兩者均沒有訊息傳送的能力,考慮到手套用無線操作效果最佳,因此加入 Arduino HC-06 藍牙板,訊息就可經由藍芽傳送至手機。

Arduino 電子板各具功能,上述的 Nano 和 UNO,大多會作運算使用,但缺點是兩者均沒有訊息傳送的能力,考慮到手套用無線操作效果最佳,因此加入 Arduino HC-06 藍牙板,訊息就可經由藍芽傳送至手機。

科技助手語破隔駭

早前有報導指出,由於提倡融合教育,香港聾人學校僅餘一間,手語推廣較從前更困難。雖然學校已製作《啟聾手語視像字典》,但該工具較適合作為學習單詞,並不適合充當翻譯。同學們設計的科研產品,能直接充當翻譯,小記期望此產品能得到更多關注及發展,進一步協助聾啞人士與外界溝通。