| 研究概要 |
日本手話の対話解析のためのアノテーションソフトウェアMovie Analysis Tool(以下MAT)を研究開発した.アノテーションはsINGDEXに基づいたタグ付けが行われるだけでなく,手話認知に関係する自律神経系反応の記録とメタ情報の付与が含まれる.MATの基本機能である動画再生とタグ付け機能を継承しつつ,生体信号だけでなく手話動作の動態信号など複数同時に扱えるようにした.まずミリ秒の時間情報に基づいたアノテーション機能を開発した.これにより時間分解能の高い生体信号に対してアノテーションすることが可能になった.それに伴いMATのインタフェースとデータ構造をXML記述へ変更した.XML記述を採用することで,時間単位の変更を可能としただけではなく,マルチユーザアノテーションの仕組みを持たせることができた.
また,文脈認知の意味処理機構を事象関連電位(ERP/N400)計測に基づいて調査した.常用表記と非常用表記の脳内処理メカニズムを解明するために,単語参照プロセスモデルを仮定し,ミスマッチ反応によるモデルの検証を行った.今回の調査対象は,認知プロセッサのうち文字認識プロセスと意味処理プロセスであった.このプロセッサの処理過程が事象関連電位N400から明らかになった.今回は,非常用表記が常用表記に比べてN400電位が有意(p<0.05)に増大し,ボタン反応も同様に延長した.一方,単語の意味が通る平文では表記間で電位に差が見られず,カテゴリ違い・無意味語では単語の意味処理の負荷が増大するに従って両者の差は有意(p<0.01)に増大した.平文で電位に差が見られないということは,意味処理で文字の形は影響を受けていないとも考えられる.するとその前の処理過程で文字の形を処理している可能性もあり,単語照合のプロセスで唱えたモデルを今後より詳細に検討する必要性がある.
|
