1999 Fiscal Year Annual Research Report
手話・日本語間相互翻訳システム実用化のための技術開発とその統合
| Project/Area Number |
10480072
|
|---|
| Research Institution | Kyoto Institute of Technology |
|---|
Principal Investigator |
黒川 隆夫 京都工芸繊維大学, 工芸科学研究科, 教授 (00029539)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
緒方 誠人 京都工芸繊維大学, 工芸科学研究科, 助手 (50273545)
|
|---|
| Keywords | 日本手話 / 機械翻訳 / 日本語 / 表情 / 人体モデル / 規則画像合成 / 手話アニメーション / レントゲン検査 |
|---|
| Research Abstract |
本研究は日本手話と日本語の間の相互翻訳をコンピューターで行い,聴覚障害者のコミュニケーション環境を改善することを目標とするものである.
1.特定の手話ニュース通訳者が話す手話を採取し,その文法の分析を統語論,意味論の観点から実施し,多数の手話表現規則を導出した.この結果は来年度の研究において手話画像の規則合成に利用することを計画している.
2.システムに内蔵する手話語彙を増やし,日本語単語,日本語文(文節ごとの分かち書き)を入力して手話画像を自然な速度で出力する部分を完成させた.ただし日本語の分析は十分に行っていないため,時制や代名詞などの用法は完全ではなく,来年度の課題である.
3.ニュースおよび胃のレントゲン検査における受検者への指示を手話画像で表現し,聴覚障害者を被験者として評価実験を行った.特に検査指示用の手話文に関しては手話通訳者の表現を可能な限り手話画像に取り入れ,自然な手話が表示されるようにした.評価実験を研究室外で行う必要があるため,コンピュータ画面を利用できず,通訳者の手話に比較するとまだ理解できない部分が残っている.
4.手話文の分析に利用できるデータベースを構築した.このデータベースでは日本語単語を入力してKWIC検索を行うことができ,様々な文脈で手話がどのように表現されるかをビデオ画像で比較することができるほか,日本語と手話の語彙の対応関係を表示し,手話の学習にも利用できるように工夫した.
5.手話に用いられる手型のうち31種を対象としてニューラルネットワークと有限状態オートマトンによって手話単語を認識するシステムを試作した.現段階での手話単語認識率は70〜85%である.
|
-
[Publications] Kawano S.: "The effects of facial expression on understanding Japanese sign language animation"Human-Computer Interaction. 1. 783-787 (1999)
-
[Publications] Fujishige E.: "Recognition of Japanese sign language words using finite automata"Human-Computer interaction. 2. 167-171 (1999)
-
[Publications] 森本一成: "聴覚障害者の胃部レントゲン検査のための手話アニメーションによる指示のわかりやすさ"ヒューマンインタフェースシンポジウム'99論文集. 725-730 (1999)
-
[Publications] Jan K.: "ニューラルネットワークとオートマトンを用いた日本語手話単語の認識"ヒューマンインタフェースシンポジウム'99論文集. 755-760 (1999)
-
[Publications] 河野純大: "ニュースを内容とする手話画像の理解における表情の効果"ヒューマンインタフェースシンポジウム'99論文集. 761-766 (1999)
-
[Publications] 藤重栄一: "ニューラルネットワークとオートマトンを用いた日本手話単語の認識"京都工芸繊維大学地域共同研究センター研究成果報告書. 8. 39-44 (1999)
-
[Publications] 河野純大: "ニュースを表現した手話画像の理解における表情の効果"京都工芸繊維大学地域共同研究センター研究成果報告書. 8. 45-50 (1999)
