讓機器看你的臉色行事

相信現代人在使用電子產品時,時常會因為莫名其妙的bug,或是產出的結果不如預期而非常不爽,但卻拿他一點辦法也沒有,只能摸摸鼻子繼續使用,而現代問題需要現代的手段來解決,近期有許多的研究在使用深度學習的方式來辨認人類表情、語氣或是文字所相對應的情緒表現。

在2020年刊登在IEEE Transactions on Computational Social Systems上的一篇文章介紹到,他們設計的AI助手可以根據使用者的表情以及語氣來調整小助手的行為,直到你露出滿意的表情(圖一)。
圖一

在這篇研究中,他們將圖像以及語音資訊輸入使用了CNN以及LSTM的神經網路中,並回傳情緒識別的結果,雖然從結果來看,這樣的準確率距離產品化還有一段距離,且膚色對識別的影響非常巨大,因為數據中大多是白人的資料(圖二)。
圖二



撰文:唐朝洋


Reference:
B. A. Erol, A. Majumdar, P. Benavidez, P. Rad, K. -K. R. Choo and M. Jamshidi, "Toward Artificial Emotional Intelligence for Cooperative Social Human–Machine Interaction," in IEEE Transactions on Computational Social Systems, vol. 7, no. 1, pp. 234-246, Feb. 2020

留言