| 研究概要 |
手話工学の立場から我々は、日本語と手話との相互翻訳システムを究極の目標として研究を行っている。本研究の目的は、統語構造を満足するアニメーションの生成が可能なマルチコンセプト駆動型電子化辞書を構築することである。
本年度は、電子化辞書システムの構築に関して、昨年度に引続き認識部、映像データベース部、言語解析部、画像生成部の個々の機能別に検討を行った。
1.認識部では、大局的な調動解析部と手型のみの局所解析部に分けて検討を行った。大局的認識部では、新たにHMMモデルを構築し片手のみの手話による認識実験を行い、昨年度行ったDPマッチングより良好な結果を得た。また、手型解析部では、新たに表面筋電位による5指屈曲状態解析を可能にした。
2.映像データベース部では、昨年作成したテスト画像を基に辞書型を検討し、NHK手話ニュースキャスターの協力により約1,000単語収録した工学院大学手話映像データベースKOSIGN Ver.1を作成した。KOSIGNは、既に希望する大学の研究機関に配布し手話研究に役立ててもらっている。
3.言語解析部では、KOSIGNを基に提案しているNVS形態素結合モデルの記述を行った。その結果、このモデルでは非手指信号の記述の曖昧性が判明した。そこで、より詳細な非手指信号解析のためアイカメラを用いて、ネイティブスピーカーによる対話ベースの予備実験を行った。
4.画像生成部では、広く普及しているDOS/Vマシンへ3Dアニメーションエンジン部を移植した。また、聾者のコミュニケーション補助手段として、インターネットを介した手話アニメーション伝送を可能にした。
以上のように本年度研究目的および実施計画はほぼ達成された。
|
