• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

眼球と唇の動きに着目した顔の特徴抽出に関する研究

研究課題

研究課題/領域番号 63460129
研究種目

一般研究(B)

配分区分補助金
研究分野 電子通信系統工学
研究機関金沢工業大学

研究代表者

垣田 有紀  金沢工業大学, 工学部, 教授 (00098823)

研究分担者 本多 清志 (本田 清)  金沢工業大学, 工学部, 助教授 (10114638)
河原 哲夫  金沢工業大学, 工学部, 教授 (40112776)
島田 洋一  金沢工業大学, 工学部, 教授 (50113155)
研究期間 (年度) 1988 – 1990
研究課題ステータス 完了 (1990年度)
配分額 *注記
5,900千円 (直接経費: 5,900千円)
1990年度: 1,400千円 (直接経費: 1,400千円)
1989年度: 1,800千円 (直接経費: 1,800千円)
1988年度: 2,700千円 (直接経費: 2,700千円)
キーワードコミュニケーション / 顔の表情 / 眼の動き / 唇の動き / 画像処理 / 音声 / 言語 / ヒューマンインタフェース / コミュニケ-ション
研究概要

本研究計画では人間のコミュニケーションにおける情報処理の実体を多元的に解析することを目的として、顔の表情からの情報要素を調べた.眼球の運動については、情報のポインタ(指示器)としての利用の可能性を調べ、唇の運動からは、ことばの理解のための補助手段として利用可能かどうかを調べた.
A.研究用計測実験システムの構築
映像と音声とを同時に記録・解析する必要があることから,われわれがすでに所有している生体信号解析システム(昭和62年度文部省私学研究助成補助金により整備された)を利用することができた.一部,映像処理用のワークステーション,映像入力用回路,メモリについては当科学研究費補助金の援助を得た.
B.研究成果
(1)唇の特徴抽出について:
1.唇の縦幅、横幅、前歯の縦間隔の3個のパラメータを用いて、11種の子音の識別を試みた。識別は概ね成功したが、/k,g/と/r/については混同した。
2.混同の原因のひとつは、画像のフレームレートが低いことである。そこでビデオ信号のラスターを画像処理で補間する方法を考案し、コンピューターシミュレーションで確かめた結果、時刻の精度をかなり向上できることがわかった。
3.これらの成果はいくつかの学会論文として出版された.また,詳細は金沢工業大学博士論文・修士論文としてまとめられた.
(2)眼の特徴抽出:
1.まず首を固定した条件で注視点の抽出実験を行った。被験者にマトリクス状のターゲットを注視させ、虹彩の画像から注視方向を推定するという方法で、注視点の再現性をしらべた結果、かなりよい精度で注視点の相対関係が再現できた。
2.同様な実験を首を固定しない条件下で行った。原データのままでは、注視点の推定位置は現実のものとかなり異なったが、特定の座標変換を行うことによって、首を固定した条件とほぼ同等にまで注視点の位置を再現できた。
3.これらの成果はいくつかの学会論文として出版された.また,詳細は金沢工業大学修士論文としてまとめられた.

報告書

(4件)
  • 1990 実績報告書   研究成果報告書概要
  • 1989 実績報告書
  • 1988 実績報告書
  • 研究成果

    (20件)

すべて その他

すべて 文献書誌 (20件)

  • [文献書誌] 栗田、本多、垣田: "口唇画像情報を併用する音声の分析"電子情報通信学会技術研究報告音声研究会資料. SP88-94. 41-48 (1988)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Honda,Kusakawa,and Kakita: "Sequential control model of speech articulation on producing word utterances"Proc.Int.Conf.on Spoken Language Processing. 20. 445-448 (1990)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 倉部、垣田: "通常ビデオ画像からの注視方向の推定-コミュニケーションの補足手段への応用-"日本ME学会大会論文集. 1-B-3 (1992)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 津守、垣田: "口唇運動のビデオ画像に基づく/aCa/環境下での子音の分類"日本音響学会講演論文集. 2-2-5 (1992)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 栗田、本多、垣田: "口唇形状を生成する生理学的モデル"日本音響学会講演論文集. 3-5-5 (1992)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 栗田、本多、垣田: "唇音の生成に関する筋電図学的研究-閉鎖,円唇化と調音結合-"日本音響学会講演論文集. 2-2-4 (1992)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 倉部勇一: "眼球運動を利用したポインタ・インターフェースの基礎研究"平成5年度 金沢工業大学修士学位論文(未公表学位論文). 50 (1993)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 津守正樹: "口唇運動による音韻情報の抽出"平成5年度 金沢工業大学修士学位論文(未公表学位論文). 79 (1993)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurita, Honda, and Kakita: "Speech analysis referring lip gestures"Trans. Speech Res. IECIE. SP88-94(In Japanese). 41-48 (1988)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Honda, Kusakawa and Kakita: "Sequential control model of speech articulation on producing word utterances"1990, Proc. Int. Conf. on Spoken Language Processing, Kobe. 445-448

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kusakawa, Honda and Kakita: "Sequential control model of speech articulation on producing word utterances"Proc. Acoust. Soc. Jpn.. (In Japanese). 3-6-10 (1991)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kusakawa, Honda and Kakita: "2-D model of the tongue derived by EMG"Proc. Acoust. Soc. Jpn.. (In Japanese). 2-2-11 (1992)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurabe and Kakita: "Estimation of eye point -Application to aid for communicative handicap-"Proc. BME Soc. Jpn.. (In Japanese). 1-B-3 (1992)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Tsumori and Kakita: "Differentiation of consonants in the context of /aCa/ based on the video images of the lip movements"Proc. Acoust. Soc. Jpn.. (In Japanese). 2-2-5 (1992)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurita, Honda, and Kakita: "Physiological model generating lip gestures"Proc. Acoust. Soc. Jpn.. (In Japanese). 3-5-5 (1992)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurita, Honda, and Kakita: "EMG study of generating labial articulation -closure, rounding and coarticulation-"Proc. Acoust. Soc. Jpn.. (In Japanese). 2-2-4 (1992)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurabe: "Basic study on pointer interface using eye movement"(Unpublished MS Thesis) Kanazawa Institute of Technology (In Japanese). (1993)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Tsumori: "Extraction of phonetic information from lip movements"(Unpublished MS Thesis) Kanazawa Institute of Technology (In Japanese). (1993)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] Kurita: "Study on generation and perception of lip articulation combining the speech production and audiovisual processing mechanism"(Unpublished Ph.D. Thesis) Kanazawa Institute of Technology (In Japanese). (1994)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1990 研究成果報告書概要
  • [文献書誌] 栗田知好・本多清志・垣田有紀: 電子情報通信学会技術研究報告. SP88-42. 43-46 (1988)

    • 関連する報告書
      1988 実績報告書

URL: 

公開日: 1988-04-01   更新日: 2017-10-19  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi