• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

音声言語の発話同時理解に基づくマルチモーダルインターフェースに関する研究

研究課題

研究課題/領域番号 10480070
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
研究分野 知能情報学
研究機関名古屋大学

研究代表者

稲垣 康善  名古屋大学, 工学研究科, 教授 (10023079)

研究分担者 梶田 将司  名古屋大学, 情報メディア教育センター, 助手 (30273296)
河口 信夫  名古屋大学, 工学研究科, 講師 (10273286)
外山 勝彦  名古屋大学, 工学研究科, 助教授 (70217561)
松原 茂樹  名古屋大学, 言語文化部, 助手 (20303589)
研究期間 (年度) 1998 – 1999
研究課題ステータス 完了 (1999年度)
配分額 *注記
7,300千円 (直接経費: 7,300千円)
1999年度: 2,300千円 (直接経費: 2,300千円)
1998年度: 5,000千円 (直接経費: 5,000千円)
キーワードマルチモーダルインターフェイス / 音声言語処理 / 自然言語処理 / 自然言語の漸進的解釈 / 発話同時理解 / 即時応答 / 話し言葉理解 / 音声対話 / マルチモーダルインタフェース / 図形エディタ
研究概要

親しみやすく使いやすい計算機システム実現のためには,話し言葉(音声言語)を用いたヒューマンインタフェースが必要不可欠である。人と計算機がなめらかな対話を行うためには,人が文を発話中にシステムが意味の解釈を随時行い,返答やあいづちを行ったり,適切な反応や処理を行うことが望ましい。本研究は,そのような音声言語を発話と同時に理解するマルチモーダルインタフェースの要素技術の確立,およびその実現を目的とし,以下の3項目について研究を実施し、研究成果を得た。
(1)自然言語の漸進的な意味解釈手法:
従来の自然言語処理手法は文単位で意味を求めていたが,本研究では,発話の途中であっても入力文の意味をできる限り解釈する手法を確立した。また,意味情報を用いた音声認識率向上を目指す。
(2)発話同時理解のための連続音声認識技術:
従来の音声認識技術は,1文単位の文法情報や単語の接続確率を用いて認識率の向上させてきたが,本研究では文法情報を用いずに,連続音声から可能なかぎり単語単位で認識を行う技術を確立した。
(3)マルチドメインシステムの統合手法:
各ドメインにおいて独立に構築した音声対話システムを、結合することにより,マルチドメインシステムの実現を可能とするアーキテクチャを提案した。
本研究では,特に(1),(3)について有用な結果を得ることができた。漸進的な意味解釈において,係り受け関係を用いた即時理解手法を開発した。本研究により構築されたプロトタイプシステムSync/Mailはメールの検索や閲覧、発信等を話し言葉とポインティングデバイスにより行うメールツールである。メール処理の最小単位に対応する言語を定め、話し言葉を漸進的に変換することにより、発話と同時にメールの検索を可能にした。このシステムに対する評価実験を行い,漸進的な処理が操作を効率化することを確認した。
また,複数のドメインを対象とする音声対話システムを実現するアーキテクチャを提案した。本アーキテクチャでは,認識された音声が各サブシステムに分配され,評価結果を統合した結果から選択し実行する。これにより,複数のドメインのシステムを,音声により同時に扱うことが可能になる。
(2)については,漸進的な音声認識システムを試作し,Sync/Mailと結合して評価を行い、有効性を確認した。

報告書

(3件)
  • 1999 実績報告書   研究成果報告書概要
  • 1998 実績報告書
  • 研究成果

    (24件)

すべて その他

すべて 文献書誌 (24件)

  • [文献書誌] Nobuo Kawaguchi: "An Open Architechture for Multi-domain Conversational Systems"Proceedings of the ICICS '99. 1B-1-4. 1-5 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Shigeki Matsubara: "Sync/Trans : Simultaneous Machine Interpretation between English and Japanese"Lecture Note in Artificial Intelligence. 1747. 134-143 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Nobuo Kawaguchi: "An Architecture for Multi-Domain Spoken Dialog Systems"Proceedings of the NLPRS '99. 463-466 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Shigeki Matsubara: "Incremental Spoken Language Translation based on A Normal-Form Conversion of CFG"Proceedings of the NLPRS '99. 515-518 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Muhtar Mahsut: "A Method of Word Selection in Japanese-Uighur Machine Translation using Latent Semantic Analysis"Proceedings of the NLPRS '99. 459-462 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Yoshihide Kato: "Spoken Language Parsing with Robustness and Incrementality"Proceedings of the NLPRS '99. 132-137 (1999)

    • 説明
      「研究成果報告書概要(和文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Nobuo Kawaguchi, Shigeki Matsubara, Katsuhiko Toyama and Yasuyoshi Inagaki: "An open Architechture for Multi-domain Conversational Systems"Proceedings of 2nd International Conference on Information, Communication and Signal Processing (ICICS). (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Shigeki Matsubara, Katsuhiko Toyama and Yasuyoshi Inagaki: "Sync/Trans : Simultaneous Machine Interpretation between English and Japanese"Advanced Topics in Artificial Intelligence : AI'99, Lecture Note in Artificial Intelligence. 1747. 134-143 (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Nobuo Kawaguchi, Shigeki Matsubara, Katsuhiko Toyama and Yasuyoshi Inagaki: "An Architechture for Multi-Domain Spoken Dialog Systems"Proceedings of the 5th Natural Language Processing Pacific Rim Symposium (NL-PRS'99). 463-466 (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Shigeki Matsubara, Hiroshi Ogawa, Katsuhiko Toyama and Yasuyoshi Inagaki: "Incremental Spoken Language Translation based on A Normal-Form Conversionof CFG"Proceedings of the 5th Natural Language Processing Pacific Rim Symposium (NL-PRS'99). 515-518 (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Muhtar Mahsut, Yasuyoshi Inagaki and Katsuhiko Toyama: "A Method of Word Selection in Japanese-Uighur Machine Translation using Latent Semantic Analysis"Proceedings of the 5th Natural Language Processing Pacific Rim Symposium (NL-PRS'99). 459-462 (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] Yoshihide Kato, Shigeki Matsubara, Katsuhiko Toyama and Yasuyoshi Inagaki: "Spoken Language Parsing with Robustness and Incrementality"Proceedings of the 5th Natural Language Processing Pacific Rim Symposium (NL-PRS'99). 132-137 (1999)

    • 説明
      「研究成果報告書概要(欧文)」より
    • 関連する報告書
      1999 研究成果報告書概要
  • [文献書誌] 伊藤傑: "係り受け関係を用いた即時発話理解―音声対話メールシステムにおける手法―"平成12年度言語処理学会全国大会. 220-223 (2000)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] Nobuo Kawaguchi: "An Architecture for Multi-Domain Spoken Dialog Systems"Proceedings of the NLPRS'99. 463-466 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 松原茂樹: "英日話し言葉翻訳のための漸進的文生成手法"情報処理学会研究報告 自然言語処理研究会NL. 132. 88-91 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 佐野諭: "漸進的処理に基づく音声対話メールツールSync/Mailの評価"情報処理学会第59回全国大会講演論文集. 4. 209-210 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 加藤芳秀: "確率文脈自由文法を用いた漸進的構文解析における出力タイミング決定手法"情報処理学会第59回全国大会講演論文集. 4. 120-121 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 田島慶一: "漸進的な連続音声認識システムの試作"平成11年度電気関係学会東海支部連合大会講演論文集. 598-598 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 河口 信夫: "発話同時理解に基づくマルチモーダル図形エディタ" 情報処理学会研究報告 音声言語研究会SLP. 22. 1-6 (1998)

    • 関連する報告書
      1998 実績報告書
  • [文献書誌] 松原 茂樹: "マルチモーダル図形エディタのための漸進的な話し言葉処理手法" 情報処理学会研究報告 音声言語研究会SLP. 23. 7-12 (1998)

    • 関連する報告書
      1998 実績報告書
  • [文献書誌] 松永 悟: "Sync/Mail:話し言葉の漸進的変換に基づく即時応答インタフェース" 情報処理学会研究報告 音声言語研究会SLP. 24. 33-40 (1998)

    • 関連する報告書
      1998 実績報告書
  • [文献書誌] 加藤 芳秀: "文法的不適格文に対する漸進的構文解析手法" 電子情報通信学会技術研究報告NLC. 6. 39-46 (1998)

    • 関連する報告書
      1998 実績報告書
  • [文献書誌] 松永 悟: "発話に即時応答可能なメールツールの提案" 情報処理学会第57回全国大会講演論文集. 4. 209-210 (1998)

    • 関連する報告書
      1998 実績報告書
  • [文献書誌] 加藤 芳秀: "漸進的な構文解析における出力タイミング決定の一手法" 情報処理学会第57回全国大会講演論文集. 2. 203-204 (1998)

    • 関連する報告書
      1998 実績報告書

URL: 

公開日: 1998-04-01   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi