Research Projects

Apr, 2018 - Mar, 2022

VR技術を利用した発達障害児・者の対人コミュニケーションスキル向上システムの構築

日本学術振興会  科学研究費助成事業 基盤研究(C)
  • 田村 祐一
  • ,
  • 梅谷 智弘
  • ,
  • 中村 浩章
  • ,
  • 内田 勇人
  • ,
  • 大野 暢亮

Grant number
18K11416
Grant amount
(Total)
4,290,000 Japanese Yen
(Direct funding)
3,300,000 Japanese Yen
(Indirect funding)
990,000 Japanese Yen

本研究の目的は,バーチャルリアリティ(VR)技術を利用した発達障害児・者の対人コミュニケーション支援システムを構築することである.初年度の目標として全方位映像を利用した空間生成について検討を行い,実際にVR空間で全方位実映像空間を作成することを可能とした.また,被験者の行動計測デバイスとして自転車型の移動デバイスを開発し,本デバイスをVR空間内で利用し,移動することを可能とするシステムを開発した.本研究内容については,学会で口頭発表を行った.
次に,被験者の感情を数値化する手法についての研究を進めた.まず,各種映像(画像)情報を利用した感情分析ライブラリを利用し,感情測定精度に関する比較実験を行った.その結果,ポジティブ感情については高い精度で認識可能であることがわかった.しかしながら,本研究課題はコミュニケーション支援,特に相手にネガティブ感情が生じている場合に注意喚起を行うシステムの構築を目的としているため,ネガティブ感情の精度評価が重要となる.そこで,各種ライブラリについて本精度評価を行ったところ,「怒り」や「悲しみ」といった個々の感情を推定することは難しかったものの,ネガティブな感情があるかどうかについてはある程度計測可能な性能があることがわかった.しかしながら,精度評価を行う過程で,カメラで人を映し,処理する場合には対象者を正面に見ていること,解像度がある程度高い範囲内に対象の人物がいること,大きな頭部の移動が生じていないことが必要となることがわかった.さらには最終的な実装を考えた場合,常にカメラを使用しているいうことが社会的に認められるのかという点で疑念があり,音声を利用した感情分析に移行することとした.以降の詳細については,進捗状況で述べる.

ID information
  • Grant number : 18K11416