|
手話工学の立場から我々は、日本語と手話との相互翻訳システムを究極の目標として研究を行っている。本研究の目的は、認識・生成を考慮した言語学的構造解析を行い、手話としての統語解析を満足するアニメーションの生成が可能な電子化辞書を構築することである。
電子化辞書構築に関しては、認識部、映像データベース部、言語解析部、画像生成部の個々の機能別に検討を行った。
1.画像認識部では、科研費により購入した高精細カメラにより片手動作の大局的な調動解析を行った。その結果、調動認識では単眼カメラモデルを用いることで非接触な画像による認識の可能性を示せた。
2.映像データベース部では、購入したビデオカメラおよび保有する光ビデオディスク装置を利用し、ネ-ティブサイナ-、手話通訳士などの協力により約500単語の認識および言語解析用映像データベースの作成を行った。録画映像の調査の結果、サイナ-の個人差による調動の揺れが、かなりあることがわかった。次年度以降、個人による手話の調動の揺れを押さえるため、NKK手話ニュースで用いられている手話を採用することにした。
3.言語解析部では、映像データベースから、音韻、音声、形態論的な基礎的言語構造分析を提案した手話のNVS形態素結合モデルを用いて行った。手話の記述には音声言語のIPAを念頭に置いた手話の発音記号表記法について検討した。
4.画像生成部では、非手指動作の表現が可能な3Dアニメーションを、市販のマイクロコンピュータにより実時間で描画し、両手の前後関係も容易に理解できる基本システムを構築した。また、3次元空間上の調動を理解しやすくするため、液晶シャッターを用い両眼立体視による手話の立体表現を、マイクロコンピューター上で実現した。
以上のように本年度研究目的および実施計画はほぼ達成された。
|
