戴著口罩也可以用唇語表達想法的口罩

對於聲帶受損或是具有相關障礙的人士來說,唇語是一種用來傳達訊息的工具,另外一種被人們廣泛認知的方式則是手語。相對於手語,唇語具有可以解放雙手做其他事,以及不用重新學習新的語言規則等優勢。

作者的研究團隊想要開發出一種基於深度學習,解碼唇語訊息的裝置,想要達成這個目標,除了解碼,也需要一種方式編碼唇語訊息,他們團隊使用了Triboelectric nanogenerators (TENGs),是一種可以將微小的動能轉化為電能的裝置,並且使用Lip-language decoding system(LLDS)這個作者團隊開發的系統,捕捉並解碼使用唇語時,嘴部周圍肌肉運動轉換而來的電能,最後幫助人們說出想要表達的語句。(圖一)
圖一

根據這個方式,人們除了可以體會到上述所提到的優點,也可以保持疫情期間感染新冠肺炎的可能性。(圖二)
圖二

作者寫到,這張圖可以表明,使用了LLDS這套系統的朋友可以恢復日常使用語言與其他人交談的能力,雖然這張圖的說服力沒有很好,但是很有趣,所以在這裡分享給大家看一下。


撰文: 唐朝洋


Reference:
Lu, Y., Tian, H., Cheng, J. et al. Decoding lip language using triboelectric sensors with deep learning. Nat Commun 13, 1401 (2022). https://doi.org/10.1038/s41467-022-29083-0

留言