• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

マルチモーダルサイレント音声認識技術に関する研究

研究課題

研究課題/領域番号 16H03211
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
研究分野 リハビリテーション科学・福祉工学
研究機関九州工業大学

研究代表者

齊藤 剛史  九州工業大学, 大学院情報工学研究院, 准教授 (10379654)

研究分担者 田村 哲嗣  岐阜大学, 工学部, 准教授 (10402215)
桂田 浩一  東京理科大学, 理工学部情報科学科, 准教授 (80324490)
速水 悟  岐阜大学, 工学部, 教授 (90345794)
永井 秀利  九州工業大学, 大学院情報工学研究院, 助教 (60237485)
山崎 敏正  九州工業大学, 大学院情報工学研究院, 教授 (50392163)
研究期間 (年度) 2016-04-01 – 2020-03-31
研究課題ステータス 完了 (2019年度)
配分額 *注記
17,030千円 (直接経費: 13,100千円、間接経費: 3,930千円)
2019年度: 2,730千円 (直接経費: 2,100千円、間接経費: 630千円)
2018年度: 2,730千円 (直接経費: 2,100千円、間接経費: 630千円)
2017年度: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
2016年度: 8,190千円 (直接経費: 6,300千円、間接経費: 1,890千円)
キーワードヒューマンインタフェース / サイレントスピーチ音声認識 / サイレント音声認識 / 読唇 / コミュニケーション支援 / ヒューマンインターフェース
研究成果の概要

本研究課題では、音声を用いずに発話内容を認識するサイレント音声認識技術において、画像や表面筋電、脳波などの各データにおけるサイレント音声認識技術を確立し、さらにマルチモーダルサイレント音声認識技術の開発を目指した。特に画像情報を用いる読唇技術においては、データベースの構築および公開、読唇技術のデモアプリの開発および公開、コンペティションの開催などを積極的に取り組んだ。深層学習技術の導入により高い認識精度を得る手法を確立した。さらにワークショップの継続開催や各種イベントに出展し、本研究成果を社会に発信した。

研究成果の学術的意義や社会的意義

本研究成果は、サイレント音声認識技術の精度向上に努めた学術的意義だけでなく、専門分野の垣根を超えて異分野融合を図り、本研究分野を活性化させるために、関連する研究者や医療・福祉従事者、企業関係者が一堂に会し、交流、情報交換、相互啓発を行う場とするワークショップを継続して開催した。さらに、学会における成果発表だけでなく、高校生向け、エンジニア向け、医療・福祉従事者向けなど各種イベントに出展し、本研究成果を社会に発信しており、本研究課題の成果は社会的意義を有するものである。

報告書

(5件)
  • 2019 実績報告書   研究成果報告書 ( PDF )
  • 2018 実績報告書
  • 2017 実績報告書
  • 2016 実績報告書
  • 研究成果

    (109件)

すべて 2020 2019 2018 2017 2016 その他

すべて 国際共同研究 (1件) 雑誌論文 (3件) (うちオープンアクセス 1件、 査読あり 2件) 学会発表 (99件) (うち国際学会 27件、 招待講演 7件) 備考 (4件) 産業財産権 (1件) 学会・シンポジウム開催 (1件)

  • [国際共同研究] University of Oulu(Finland)

    • 関連する報告書
      2016 実績報告書
  • [雑誌論文] Control of PLEN robot by electroencephalograms on recalling images of its movement2018

    • 著者名/発表者名
      Takahiro Yamanoi, Hiroshi Takayanagi, Hisashi Toyoshima, Toshimasa Yamazaki, Michio Sugeno
    • 雑誌名

      北海学園大学工学部研究報告

      巻: 45 ページ: 47-54

    • NAID

      120006378451

    • 関連する報告書
      2017 実績報告書
    • オープンアクセス
  • [雑誌論文] Potential association between modular structures of brain functional connectivity networks and individual variability in foreign language ability2017

    • 著者名/発表者名
      山﨑敏正,秋山暉佳,副島英子,山本宇彦
    • 雑誌名

      認知科学

      巻: 24 ページ: 118-128

    • 関連する報告書
      2016 実績報告書
    • 査読あり
  • [雑誌論文] Investigation of DNN-Based Audio-Visual Speech Recognition2016

    • 著者名/発表者名
      Satoshi Tamura, Hiroshi Ninomiya, Norihide Kitaoka, Shin Osuga, Yurie Iribe, Kazuya Takeda, Satoru Hayamizu
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E99.D 号: 10 ページ: 2444-2451

    • DOI

      10.1587/transinf.2016SLP0019

    • NAID

      130005598220

    • ISSN
      0916-8532, 1745-1361
    • 関連する報告書
      2016 実績報告書
    • 査読あり
  • [学会発表] マルチモーダル音声強調に対するCycle-Consistencyの導入の検討2020

    • 著者名/発表者名
      池上 凌,大村 英史,桂田 浩一
    • 学会等名
      日本音響学会2020年春季研究発表会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] StarGAN-VCモデルにおける潜在表現への制約の有効性について2020

    • 著者名/発表者名
      柴宮 怜,大村 英史,桂田 浩一
    • 学会等名
      日本音響学会2020年春季研究発表会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 音声想起時脳波中の音節識別について2019

    • 著者名/発表者名
      深井 健大郎,大村 英史,桂田 浩一,新田 恒雄
    • 学会等名
      人工知能学会第33回全国大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Universal Transformerを使用した対話破綻検出2019

    • 著者名/発表者名
      桑原 健太,大村 英史,桂田 浩一
    • 学会等名
      人工知能学会第33回全国大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] LSTMを用いた分類問題における判断根拠可視化の検討2019

    • 著者名/発表者名
      齊藤 剛史,徳永 旭将
    • 学会等名
      第22回 画像の認識・理解シンポジウム(MIRU2019)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] LiP25w: Word-level Lip Reading Web Application for Smart Device2019

    • 著者名/発表者名
      Takeshi Saitoh and Michiko Kubokawa
    • 学会等名
      Proc. of 15th International Conference on Auditory-Visual Speech Processing (AVSP2019)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Lip Reading Experiments for Multiple Databases Using Conventional Method2019

    • 著者名/発表者名
      Tatsuya Shirakata and Takeshi Saitoh
    • 学会等名
      Proc. of SICE Annual Conference
    • 関連する報告書
      2019 実績報告書
  • [学会発表] LiP25w: スマートデバイスで単語読唇2019

    • 著者名/発表者名
      齊藤 剛史,白方 達也
    • 学会等名
      フォーラム顔学2019
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 介護時会話を想定した少数語彙世界における黙声単語認識の一手法2019

    • 著者名/発表者名
      永井 秀利,左島 綾乃,中村 貞吾
    • 学会等名
      電気関係学会九州支部連合大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 音声想起脳波からの言語表象抽出と音節認識2019

    • 著者名/発表者名
      深井 健大郎,大村 英史,桂田 浩一,平田 里佳,入部 百合絵,付 明川,田口 亮,新田 恒雄
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 音声想起時脳波の単語尤度ベクトルを用いた単語認識2019

    • 著者名/発表者名
      平田 里佳,入部 百合絵,深井 健大郎,桂田 浩一,新田 恒雄
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Real-Time Silent Speech BCI with Japanese Hiragana2019

    • 著者名/発表者名
      Gaborit Sylvain, Toshimasa Yamazaki
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Discriminability among Japanese vowels using early components in silent-speech-related potentials2019

    • 著者名/発表者名
      Sho Tsukiyama, Toshimasa Yamazaki
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 黙声孤立単音認識における表面筋電チャネルごとの活動開始位置推定時の曖昧さ低減2019

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 神経難病患者の口形認識に関する研究2019

    • 著者名/発表者名
      中村 祐哉,齊藤 剛史,伊藤 和幸
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 介護時会話を想定した少数語彙世界における黙声単語認識の一手法2019

    • 著者名/発表者名
      永井 秀利,左島 綾乃,中村 貞吾
    • 学会等名
      電子情報通信学会 2019年10月WIT/SP/SSRW研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 3DCNNとBidirectional GRUを用いた読唇2019

    • 著者名/発表者名
      小口 優人,大村 英史,桂田 浩一
    • 学会等名
      第6回サイレント音声認識ワークショップ
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 深層学習とAdaBoostによる連続発話画像の認識2019

    • 著者名/発表者名
      嶺山 広樹,山下 遼真,中島 成穂,磯部 真之介,田村 哲嗣,速水 悟
    • 学会等名
      第6回サイレント音声認識ワークショップ
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 3DCNNを用いた口唇画像の発話認識2019

    • 著者名/発表者名
      山下 遼真,速水 悟,田村 哲嗣,嶺山 広樹,赤澤 玲,中島 成穂,磯部 真之介,西脇 拓実,前田 翼
    • 学会等名
      第6回サイレント音声認識ワークショップ
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 読唇のためのDCCAを用いたマルチモーダルデータ拡張2019

    • 著者名/発表者名
      下西 雅樹,田村 哲嗣,速水 悟
    • 学会等名
      電子情報通信学会 2019年1月音声研究会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Multimodal feature conversion for visual speech recognition using deep ca0nical correlation analysis2019

    • 著者名/発表者名
      Masaki Shimonishi, Satoshi Tamura and Satoru Hayamizu,
    • 学会等名
      NCSP'19
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] CNNを用いた文章発話シーンに対する単音読唇2019

    • 著者名/発表者名
      清水 翔太,齊藤 剛史
    • 学会等名
      動的画像処理実利用化ワークショップ2019(DIA2019)
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 深層ボトルネック特徴と深層正準相関分析を用いたマルチモーダル声質変換2018

    • 著者名/発表者名
      田村 哲嗣,堀尾 健斗,遠藤 肇,速水 悟,戸田 智基
    • 学会等名
      電子情報通信学会 2018年6月音声研究会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] SSSDを用いた深層学習による読唇精度に関する検討2018

    • 著者名/発表者名
      窪川 美智子,齊藤 剛史
    • 学会等名
      第21回 画像の認識・理解シンポジウム(MIRU2018)
    • 関連する報告書
      2018 実績報告書
  • [学会発表] SSSD: Speech Scene Database by Smart Device for Visual Speech Recognition2018

    • 著者名/発表者名
      Takeshi Saitoh and Michiko Kubokawa
    • 学会等名
      24th International Conference on Pattern Recognition (ICPR2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Audio-visual voice conversion using deep ca0nical correlation analysis for deep bottleneck features2018

    • 著者名/発表者名
      Satoshi Tamura, Kento Horio, Hajime Endo, Satoru Hayamizu and Tomoki Toda,
    • 学会等名
      INTERSPEECH2019
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] SSSDを用いた深層学習による読唇実験報告2018

    • 著者名/発表者名
      齊藤 剛史,窪川 美智子
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 口唇画像を用いたCNN-HMMによる数字発話認識2018

    • 著者名/発表者名
      中島 成穂,尾崎 司,田村 哲嗣,速水 悟
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 深層ボトルネック特徴と深層正準相関分析を用いたマルチモーダル声質変換2018

    • 著者名/発表者名
      田村 哲嗣,堀尾 健斗,遠藤 肇,速水 悟,戸田 智基
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 黙声認識における冗長ウェーブレット係数の集合選択に依存した周波数特徴の違い2018

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      FIT2018
    • 関連する報告書
      2018 実績報告書
  • [学会発表] ウェーブレット係数集合選択によるスクワット運動時表面筋電の周波数特徴の違い2018

    • 著者名/発表者名
      縄田聖人,永井秀利,中村貞吾
    • 学会等名
      電気・情報関係学会九州支部連合大会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 表面筋電の冗長ウェーブレット係数集合タイプによる特徴差2018

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] ウェーブレット係数集合の選択による黙声発声開始位置推定手法2018

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      電子情報通信学会総合大会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Active Appearance Modelsを用いた読唇2018

    • 著者名/発表者名
      小口 優人,大村 英史,桂田 浩一
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 発話時脳波を利用した音声言語情報の識別2018

    • 著者名/発表者名
      深井 健大郎,大村 英史,桂田 浩一,平田 里佳,入部 百合絵,新田 恒雄
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Silent-speech-related potentials -grand averagesによる検討-2018

    • 著者名/発表者名
      山﨑 敏正,東 直人
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 機械学習と深層学習による時系列モデル入門2018

    • 著者名/発表者名
      速水 悟
    • 学会等名
      第5回サイレント音声認識ワークショップ
    • 関連する報告書
      2018 実績報告書
    • 招待講演
  • [学会発表] A method to estimate the active site by the brain functional connectivity networks based on electroencephalograms during various facial expressions2018

    • 著者名/発表者名
      A.Watanabe, T.Yamazaki, I.Nemoto
    • 学会等名
      Neuroscience 2018
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Differences in scalp-recorded EEG based brain functional connectivity networks between Alzheimer's disease and elderly controls2018

    • 著者名/発表者名
      S.Nishijima, Y.Kuroiwa, H.Nakane, K.Fuji0, T.Hirai, K.Suzuki, Y.Baba, T.Yamazaki
    • 学会等名
      Neuroscience 2018
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] 再帰型ニューラルネットワークを用いた動き特徴量による単語読唇システムの開発2018

    • 著者名/発表者名
      齊藤 剛史,窪川 美智子
    • 学会等名
      ビジョン技術の実利用ワークショップ(ViEW2018)
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Brain functional connectivity network flexibilityによる学習効果個人差の定量化2018

    • 著者名/発表者名
      秋山暉佳,副島英子,山﨑敏正,山本宇彦
    • 学会等名
      電子情報通信学会 ニューロコンピューティング研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 相関規則マイニングの表情刺激時におけるbrain functional connectivity networkへの応用2018

    • 著者名/発表者名
      渡邊朝子,山﨑敏正
    • 学会等名
      電子情報通信学会 ニューロコンピューティング研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 表面筋電チャネル間における筋活動推移の類似性を用いた黙声日本語単音認識2018

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      電子情報通信学会 MEとバイオサイバネティックス研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 変分オートエンコーダーを用いた多重音解析の性能評価2018

    • 著者名/発表者名
      森口寛生,大村英史,桂田浩一
    • 学会等名
      情報処理学会第80回全国大会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] SSSD:スマートデバイスを用いた読唇技術向け日本語データベース2018

    • 著者名/発表者名
      齊藤 剛史,窪川 美智子
    • 学会等名
      電子情報通信学会 パターン認識とメディア理解研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 日本語音節発話・想起時の脳波解析2017

    • 著者名/発表者名
      浅原 康平,中根 丈司,神崎 卓丸,桂田 浩一,杉本 俊二,新田 恒雄,堀川 順生
    • 学会等名
      日本音響学会2017年春季研究発表会講演論文集
    • 発表場所
      明治大学、神奈川県川崎市
    • 年月日
      2017-03-15
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 発話時と想起時の脳波による日本語短音節認識の比較2017

    • 著者名/発表者名
      神崎 卓丸,浅原 康平,中根 丈司,桂田 浩一,杉本 俊二,堀川 順生,新田 恒雄
    • 学会等名
      日本音響学会2017年春季研究発表会講演論文集
    • 発表場所
      明治大学、神奈川県川崎市
    • 年月日
      2017-03-15
    • 関連する報告書
      2016 実績報告書
  • [学会発表] Suffix Arrayを用いた高速STDにおけるキーワード分割の最適化に関する検討2017

    • 著者名/発表者名
      桂田 浩一
    • 学会等名
      日本音響学会2017年春季研究発表会講演論文集
    • 発表場所
      明治大学、神奈川県川崎市
    • 年月日
      2017-03-15
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 顔画像の対称3D-AAMによる顔方向非依存な発話認識2017

    • 著者名/発表者名
      渡辺 拓也,桂田 浩一,金澤 靖
    • 学会等名
      電子情報通信学会技術研究報告
    • 発表場所
      京都大学,京都府京都市
    • 年月日
      2017-01-19
    • 関連する報告書
      2016 実績報告書
  • [学会発表] Two Features Combination with Gated Recurrent Unit for Visual Speech Recognition2017

    • 著者名/発表者名
      Masaya Iwasaki, Michiko Kubokawa, and Takeshi Saitoh
    • 学会等名
      IAPR International Conference on Machine Vision Applications (MVA2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Relationship between the modular structures of BFCNs and individual variability in foreign language learning ability2017

    • 著者名/発表者名
      Akiyoshi Akiyama, Asako Watanabe, Toshimasa Yamazaki, Eiko Soejima, Takahiko Yamamoto
    • 学会等名
      CAN-ACN 2017
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Discrimination of finger flexion speed using EEG power spectral entropy2017

    • 著者名/発表者名
      Haruko Nishida, Naoto Toshima, Toshimasa Yamazaki, Takahiro Yamanoi
    • 学会等名
      CAN-ACN 2017
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Spatiotemporal human brain activities on recalling 4-legged mammal and fruit names.2017

    • 著者名/発表者名
      Koji Sugimoto, Takahiro Yamanoi, Hisashi Toyoshima, Mika Otsuki, Shin-ichi Ohnishi, Toshimasa Yamazaki:
    • 学会等名
      Joint 17th World Congress of International Fuzzy Systems Association and 9th International Conference on Soft Computing and Intelligent Systems (IFSA-SCIS 2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 人工知能,機械学習と深層学習の基礎と応用2017

    • 著者名/発表者名
      田村 哲嗣
    • 学会等名
      日本医用画像工学会 第36回大会
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] Lipreading using deep bottleneck features for optical and depth images2017

    • 著者名/発表者名
      Satoshi Tamura, Koichi Miyazaki and Satoru Hayamizu
    • 学会等名
      14th International Conference on Auditory-Visual Speech Processing (AVSP2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 顔画像に対するコントラスト変換を用いた読唇2017

    • 著者名/発表者名
      窪川 美智子,齊藤 剛史
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] CNNを用いた読唇の検討2017

    • 著者名/発表者名
      尾崎 司,田村 哲嗣,速水 悟
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 大語彙リアルタイム読唇システムの構築に向けた試み2017

    • 著者名/発表者名
      嶺山 広樹,田村 哲嗣,速水 悟
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 深層学習によるボトルネック特徴量を用いた マルチモーダル声質変換2017

    • 著者名/発表者名
      堀尾 健斗,遠藤 肇,田村 哲嗣,速水 悟
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 表面筋電計測チャネル間のcos類似度を認識パラメータとした黙声単音認識の試み2017

    • 著者名/発表者名
      永井 秀利
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 脳波による日本語短音節の認識2017

    • 著者名/発表者名
      新田 恒雄,桂田 浩一,神崎 卓丸
    • 学会等名
      第4回サイレント音声認識ワークショップ
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 読唇技術のサーベイ2017

    • 著者名/発表者名
      齊藤 剛史
    • 学会等名
      計測自動制御学会ライフエンジニアリング部門シンポジウム(LE2017)
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] サイレント音声認識に関する最新の研究動向(CVPR2017/KDD2017報告)2017

    • 著者名/発表者名
      速水 悟
    • 学会等名
      計測自動制御学会ライフエンジニアリング部門シンポジウム(LE2017)
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] 頭皮脳波を利用したSSBCIJシステムの研究動向について2017

    • 著者名/発表者名
      山﨑 敏正
    • 学会等名
      計測自動制御学会ライフエンジニアリング部門シンポジウム(LE2017)
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] 音声と画像によるマルチモーダル音声認識の現状2017

    • 著者名/発表者名
      田村 哲嗣
    • 学会等名
      計測自動制御学会ライフエンジニアリング部門シンポジウム(LE2017)
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] Intensity Correction Effect for Lip Reading2017

    • 著者名/発表者名
      Michiko Kubokawa and Takeshi Saitoh
    • 学会等名
      28th British Machine Vision Conference (BMVC2017) workshop on Lip-Reading using Deep Learning Methods (LRDLM2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 読唇技術における顔画像に対する輝度補正効果の検証2017

    • 著者名/発表者名
      窪川 美智子,齊藤 剛史
    • 学会等名
      情報処理学会 コンピュータビジョンとイメージメディア研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] Comparison of Spatiotemporal Brain Activities on Recalling Tetrapod Animal and Fruit Names2017

    • 著者名/発表者名
      Koji Sugimoto, Takahiro Yamanoi, Hisashi Toyoshima, Mika Otsuki, Shin-ichi Ohnishi, and Toshimasa Yamazaki
    • 学会等名
      18th International Symposium on Advanced Intelligent Systems (ISIS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Brain Functional Connectivity Network-based Approach for Recognition of Alzheimer’s Disease in EEG2017

    • 著者名/発表者名
      Sakura Nishijima, Toshimasa Yamazaki
    • 学会等名
      18th International Symposium on Advanced Intelligent Systems (ISIS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Prediction of Finger Flexion Speed using EEG Power Spectral Entropy2017

    • 著者名/発表者名
      Keisuke Ando, Haruko Nishida and Toshimasa Yamazaki
    • 学会等名
      18th International Symposium on Advanced Intelligent Systems (ISIS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] A method to construct and quantify the brain functional connectivity networks based on synchronization likelihood of electroencephalograms during different facial expressions2017

    • 著者名/発表者名
      Asako Watanabe, Toshimasa Yamazaki
    • 学会等名
      18th International Symposium on Advanced Intelligent Systems (ISIS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] サイレント音声認識の研究動向 ~読唇技術を中心として~2017

    • 著者名/発表者名
      齊藤 剛史
    • 学会等名
      電子情報通信学会 音声研究会,福祉情報工学研究会
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [学会発表] Efficiency of Independent Component Analysis?for Equivalent Current Dipole Localization2017

    • 著者名/発表者名
      Takahiro Yamanoi, Yoshinori Tanaka, Hisashi Toyoshima, Shin-ich Ohnishi, ?and Toshimasa Yamazaki
    • 学会等名
      IWACIII2017+ NSFC-CAS-JSPSsymposium2017
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Dynamic generation of thesaurus from plaintext using deep learning2016

    • 著者名/発表者名
      K.Matsushita and T.Yamazaki
    • 学会等名
      4th International symposium on Applied Engineering and Sciences (SAES2016)
    • 発表場所
      九州工業大学、福岡県北九州市
    • 年月日
      2016-12-17
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Denoising of scalp-recorded EEGs using higher-order statistics for BCI2016

    • 著者名/発表者名
      N.Toshima and T.Yamazaki
    • 学会等名
      4th International symposium on Applied Engineering and Sciences (SAES2016)
    • 発表場所
      九州工業大学、福岡県北九州市
    • 年月日
      2016-12-17
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] A method for constructing brain functional connectivity network based on synchronization likelihood of scalp-recorded EEGs2016

    • 著者名/発表者名
      A.Watanabe and T.Yamazaki
    • 学会等名
      4th International symposium on Applied Engineering and Sciences (SAES2016)
    • 発表場所
      九州工業大学、福岡県北九州市
    • 年月日
      2016-12-17
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] EEG during Japanese syllable recall and speech tasks2016

    • 著者名/発表者名
      Kohei Asahara, Jozi Nakane, Takumaru Kanzaki, Shunji Sugimoto, Kouich Katsurada, Tsuneo Nitta, and Junsei Horikawa
    • 学会等名
      The 3rd Annual Meeting of the Society for Bioacoustics
    • 発表場所
      伊良湖シーパーク&スパ、愛知県田原市
    • 年月日
      2016-12-10
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Japanese monosyllable recognition from EEG2016

    • 著者名/発表者名
      Takumaru Kanzaki, Shunji Sugimoto, Kouich Katsurada, Junsei Horikawa, and Tsuneo Nitta
    • 学会等名
      The 3rd Annual Meeting of the Society for Bioacoustics
    • 発表場所
      伊良湖シーパーク&スパ、愛知県田原市
    • 年月日
      2016-12-10
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Lip Reading from Multi View Facial Images Using 3D-AAM2016

    • 著者名/発表者名
      Takuya Watanabe, Kouichi Katsurada, and Yasushi Kanazawa
    • 学会等名
      ACCV2016 workshop: Multi-view Lip-reading/Audio-visual Challenges (MLAC2016)
    • 発表場所
      TICC、台北市、台湾
    • 年月日
      2016-11-20
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Concatenated Frame Image based CNN for Visual Speech Recognition2016

    • 著者名/発表者名
      Takeshi Saitoh, Ziheng Zhou, Guoying Zhao, and Matti Pietikainen
    • 学会等名
      ACCV2016 workshop: Multi-view Lip-reading/Audio-visual Challenges (MLAC2016)
    • 発表場所
      TICC、台北市、台湾
    • 年月日
      2016-11-20
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Continuous Inaudible Recognition of Japanese Vowels Using Features Detected at Lips Shape Peaks based on Surface Electromyography2016

    • 著者名/発表者名
      Nao Kurogi, Hidetoshi Nagai, Teigo Nakamura
    • 学会等名
      3rd International Conference on Systems and Informatics (ICSAI 2016)
    • 発表場所
      上海、中国
    • 年月日
      2016-11-19
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] 読唇向け公開データベースの紹介2016

    • 著者名/発表者名
      窪川 美智子,齊藤 剛史
    • 学会等名
      第6回バイオメトリクスと認識・認証シンポジウム(SBRA2016)
    • 発表場所
      芝浦工業大学、東京都江東区
    • 年月日
      2016-11-16
    • 関連する報告書
      2016 実績報告書
  • [学会発表] フレーム連結画像を用いたCNNによる読唇2016

    • 著者名/発表者名
      齊藤 剛史
    • 学会等名
      第6回バイオメトリクスと認識・認証シンポジウム(SBRA2016)
    • 発表場所
      芝浦工業大学、東京都江東区
    • 年月日
      2016-11-16
    • 関連する報告書
      2016 実績報告書
  • [学会発表] Development of audio-visual speech corpus toward speaker-independent Japanese LVCSR2016

    • 著者名/発表者名
      Kazuto Ukai, Satoshi Tamura and Satoru Hayamizu
    • 学会等名
      Oriental COCOSDA 2016
    • 発表場所
      Grand Aston Benoa, Bali, Indonesia
    • 年月日
      2016-10-26
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] 連続音間の相関パラメータを導入した口形極点に基づく連続黙声母音認識2016

    • 著者名/発表者名
      黒木菜緒,永井秀利,中村貞吾
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 少数語彙世界の特性を活用した黙声音声認識手法に関する一提案2016

    • 著者名/発表者名
      永井秀利,渡邉優実,中村貞吾
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] EEG信号からの日本語単音節認識2016

    • 著者名/発表者名
      新田 恒雄,神崎 卓丸,堀川 順生,杉本 俊二,浅原 康平,中根 丈司,中澤 香太,桂田浩一
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] フレーム連結画像を用いたCNNによる読唇2016

    • 著者名/発表者名
      齊藤 剛史
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 3DAAMを用いた顔方向非依存の読唇の評価2016

    • 著者名/発表者名
      渡辺 拓也,桂田 浩一,金澤 靖
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 大語彙マルチモーダル音声認識に向けたデータ収集2016

    • 著者名/発表者名
      鵜飼 和渡,田村 哲嗣,速水 悟
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 口唇画像と深度情報を用いたマルチモーダル読唇2016

    • 著者名/発表者名
      宮崎 晃一,田村 哲嗣,速水 悟
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 画像情報を用いた深層ボトルネック特徴量による発話区間検出2016

    • 著者名/発表者名
      田村 哲嗣,藤原 正希,速水 悟
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 学会報告(INTERSPEECH2016)2016

    • 著者名/発表者名
      田村 哲嗣
    • 学会等名
      第3回サイレント音声認識ワークショップ
    • 発表場所
      福岡朝日ビル、福岡県福岡市
    • 年月日
      2016-10-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 口形極点に基づく連続黙声母音認識への連続音間での相関パラメータ導入の効果2016

    • 著者名/発表者名
      黒木菜緒,永井秀利,中村貞吾
    • 学会等名
      第69回電気・情報関係学会九州支部連合大会講演論文集
    • 発表場所
      宮崎大学、宮崎県宮崎市
    • 年月日
      2016-09-29
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 日本語単音節発話時と想起時の脳波解析2016

    • 著者名/発表者名
      浅原 康平,中根 丈司,神崎 卓丸,中澤 香太,桂田 浩一,杉本 俊二,新田 恒雄,堀川 順生
    • 学会等名
      日本音響学会2016年秋季研究発表会講演論文集
    • 発表場所
      富山大学、富山県富山市
    • 年月日
      2016-09-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] 脳波からの日本語単音節認識方式の検討2016

    • 著者名/発表者名
      神崎 卓丸,浅原 康平,中根 丈司,中澤 香太,桂田 浩一,杉本 俊二,堀川 順生,新田 恒雄
    • 学会等名
      日本音響学会2016年秋季研究発表会講演論文集
    • 発表場所
      富山大学、富山県富山市
    • 年月日
      2016-09-14
    • 関連する報告書
      2016 実績報告書
  • [学会発表] Prognostic feature extraction in colorectal cancer by combining the gene expression data and the clinical data2016

    • 著者名/発表者名
      A.Kitajima et al.
    • 学会等名
      15th European Conference on Computational Biology
    • 発表場所
      World Forum Convention Center、The Hague, Netherlands
    • 年月日
      2016-09-03
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Identification of distinct subtypes in colorectal cancer with the survival and the primary sites2016

    • 著者名/発表者名
      Y.Hosokawa et al.
    • 学会等名
      15th European Conference on Computational Biology
    • 発表場所
      World Forum Convention Center、The Hague, Netherlands
    • 年月日
      2016-09-03
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] フレーム連結画像を用いたCNNによるシーン認識2016

    • 著者名/発表者名
      齊藤 剛史,Ziheng Zhou,Iryna Anina,Guoying Zhao,Matti Pietikainen
    • 学会等名
      第19回 画像の認識・理解シンポジウム(MIRU2016)
    • 発表場所
      アクトシティ浜松、静岡県浜松市
    • 年月日
      2016-08-01
    • 関連する報告書
      2016 実績報告書
  • [備考] 第5回サイレント音声認識ワークショップ

    • URL

      http://www.slab.ces.kyutech.ac.jp/SSRW2018

    • 関連する報告書
      2018 実績報告書
  • [備考] 読唇技術デモンストレーションWebアプリケーション

    • URL

      https://demo.slab.ces.kyutech.ac.jp/VSR/index.html

    • 関連する報告書
      2018 実績報告書
  • [備考] 第4回サイレント音声認識ワークショップ

    • URL

      http://www.slab.ces.kyutech.ac.jp/SSRW2017/

    • 関連する報告書
      2017 実績報告書
  • [備考] 第3回サイレント音声認識ワークショップ

    • URL

      http://www.slab.ces.kyutech.ac.jp/SSRW2016/

    • 関連する報告書
      2016 実績報告書
  • [産業財産権] 読唇装置及び読唇方法2019

    • 発明者名
      齊藤剛史
    • 権利者名
      齊藤剛史
    • 産業財産権種類
      特許
    • 産業財産権番号
      2019-213234
    • 出願年月日
      2019
    • 関連する報告書
      2019 実績報告書
  • [学会・シンポジウム開催] ACCV2016 workshop on Multi-view Lip-reading/Audio-visual Challenges (MLAC2016)2016

    • 発表場所
      TICC、台北市、台湾
    • 関連する報告書
      2016 実績報告書

URL: 

公開日: 2016-04-21   更新日: 2021-02-19  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi