ElderTranslator

Scenario

  • 有些長者講話,旁人聽不懂
  • 長者與看護語言不通
  • 年長者的需求無法傳達

 

爺爺用台語表示他要喝水,但看護聽不懂。

於是爺爺比手畫腳表示他要喝水,

但看護還是不一定懂,於是爺爺就放棄了。

Solution

建立一個辨識長者手勢,

並且轉換成看護/家人聽得懂的語言的機制

What we have done...

調查長者照護面臨的問題&實際需求

 

發放網路問卷,樣本數39

 

 

綜合問卷結果:

  • 高達57.9%老人,口語無法清楚表達
  • 但這些老人之中,63.64%手部可活動(可偵測手勢)
  • (如果加上手指可微幅活動: 90.9%)
  • 他們之中,36.3%與家人有語言溝通問題
  • 另外,有替這些老人請看護的家庭中,37.5%與看護有溝通問題。

進一步找有需求的

家人長者看護訪談

實作方法

  • 長者雙手配戴智慧手環

  • 長者身旁架設手機

。一旦手部有晃動,相機開始錄影

。將錄下來的影片上傳到Mturk

。由有照護經驗者判斷長者的需求

。系統將需求翻譯成家人/看護的語言

 

What if the result doesn't meet elder's need?

  • 預先設定長者常用動作

  • 長者從中選擇

Evaluation

  • 看護與長者溝通困難度降低多少%

  • 長者使用系統滿意度(能否確實傳達需求)

deck

By Kelly Chang