• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A STADY ON THE UNIVERSAL ASSISTIVE TECHNOLOGY DEVICES TO DEVELOP COMMUNICABILITY OF THE PEOPLE WITH MENTAL RETARDETION, AUTISTIC DISORDER AND OTHER DISABILITIES

Research Project

Project/Area Number 19300281
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Research Field Educational technology
Research InstitutionKobe University

Principal Investigator

NAKABAYASHI Toshitaka  Kobe University, 大学院・人間発達環境学研究科, 教授 (50164265)

Co-Investigator(Kenkyū-buntansha) INAGAKI Shigenori  神戸大学, 人間発達環境学研究科, 教授 (70176387)
TKIGUCHI Tetsuya  神戸大学, 自然科学系先端融合研究環都市安全研究センター, 准教授 (40397815)
TATSUMI Takeo  東京農工大学, 総合情報メディアセンター, 准教授 (70257195)
LI Yoshiaki  追手門学院大学, 経済学部, 准教授 (60411485)
Co-Investigator(Renkei-kenkyūsha) ARIKI Yasuo  神戸大学, 自然科学系先端融合研究環都市安全研究センター, 教授 (10135519)
Research Collaborator KISHIDA Daisuke  兵庫県立神戸特別支援学校, 教諭
FUZIWARA Shiori  兵庫県立神戸特別支援学校, 教諭
MATSUMASA Hironori  神戸大学, 工学研究科修士課程
MIYAMOTO Chikoto  神戸大学, 工学研究科修士課程
KOMAI Yuuto  神戸大学, 工学研究科修士課程
TANAKA Katsuyuki  神戸大学, 工学研究科修士課程
Project Period (FY) 2007 – 2009
Project Status Completed (Fiscal Year 2009)
Budget Amount *help
¥20,280,000 (Direct Cost: ¥15,600,000、Indirect Cost: ¥4,680,000)
Fiscal Year 2009: ¥4,810,000 (Direct Cost: ¥3,700,000、Indirect Cost: ¥1,110,000)
Fiscal Year 2008: ¥5,980,000 (Direct Cost: ¥4,600,000、Indirect Cost: ¥1,380,000)
Fiscal Year 2007: ¥9,490,000 (Direct Cost: ¥7,300,000、Indirect Cost: ¥2,190,000)
Keywordsヒューマン・インターフェイス / コミュニケーション / 知的障害 / 自閉症 / 構音障害 / ユニバーサルデザイン / ヒューマン・インターファイス / 音声認識 / VOCA
Research Abstract

We investigated the effectiveness of the communication device "Picture aid" developed for the people with mental retardation and autistic disorder. On the other hand, we built an acoustic model for a person with articulation disorder and evaluated speech recognition in the task of operation for home information appliances by ECU. Further we investigated the multimodal speech recognition of them resulting from athetoid cerebral palsy. The articulation of speech tends to become unstable due to strain on speech-related muscles, and that causes degradation of speech recognition. Therefore, we use multiple acoustic frames as an acoustic feature to solve this problem. In addition to acoustic features, visual features are used to increase noise robustness in a real environment. However, there are recognition problems resulting from the tendency of those suffering from cerebral palsy to move their head erratically. So, we investigated a pose-robust audio-visual speech recognition method using an Active Appearance Model to solve this problem.

Report

(4 results)
  • 2009 Annual Research Report   Final Research Report ( PDF )
  • 2008 Annual Research Report
  • 2007 Annual Research Report
  • Research Products

    (25 results)

All 2009 2008 2007

All Journal Article (3 results) (of which Peer Reviewed: 1 results) Presentation (22 results)

  • [Journal Article] 特定話者用音声認識ソフト開発とアルキメデスプロジェクトの連携に関する研究2009

    • Author(s)
      李義昭
    • Journal Title

      追手門経済論集 44巻

      Pages: 12-40

    • NAID

      110007336194

    • Related Report
      2009 Final Research Report
  • [Journal Article] 特定話者用音声認識ソフト開発とアルキメデスプロジェクトの連携に関する研究2009

    • Author(s)
      李義昭
    • Journal Title

      追手門経済論集 44

      Pages: 12-40

    • NAID

      110007336194

    • Related Report
      2009 Annual Research Report
  • [Journal Article] Wiimote Positioning System (WPS) の開発と教育応用の可能性2009

    • Author(s)
      中野由章
    • Journal Title

      日本教育工学会論文誌 33

      Pages: 185-188

    • Related Report
      2009 Annual Research Report
    • Peer Reviewed
  • [Presentation] AAMを用いた顔方位にロバストな唇領域特徴抽出と音声特徴による構音障害者の音声認識2009

    • Author(s)
      宮本千琴, 駒井祐人, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      第11回音声言語シンポジウム
    • Place of Presentation
      東京
    • Year and Date
      2009-12-22
    • Related Report
      2009 Final Research Report
  • [Presentation] AAMを用いた顔方位にロバストな唇領域特徴抽出と音声特徴による構音障害者の音声認識2009

    • Author(s)
      宮本千琴, 駒井祐人, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      第11回音声言語シンポジウム
    • Place of Presentation
      東京大学(東京都)
    • Year and Date
      2009-12-22
    • Related Report
      2009 Annual Research Report
  • [Presentation] 構音障害者の音声認識における動的特徴量の考察2009

    • Author(s)
      宮本千琴, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      青森
    • Year and Date
      2009-10-29
    • Related Report
      2009 Final Research Report
  • [Presentation] 構音障害者の音声認識における動的特徴量の考察2009

    • Author(s)
      宮本千琴, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      東北大学(青森県)
    • Year and Date
      2009-10-29
    • Related Report
      2009 Annual Research Report
  • [Presentation] Wiimote Positioning System(WPS)-An epoch-making system of indoor position detection-2009

    • Author(s)
      Yoshiaki NAKANO, Takeo TATSUMI, Kiyoshi TAJITSU
    • Organizer
      EduTech
    • Place of Presentation
      Brazil-Florianopolis
    • Year and Date
      2009-10-16
    • Related Report
      2009 Annual Research Report
  • [Presentation] 局所特徴量を用いた構音障害者の音声認識の検討2009

    • Author(s)
      宮本千琴, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2009年秋季研究発表会
    • Place of Presentation
      福島
    • Year and Date
      2009-09-15
    • Related Report
      2009 Final Research Report
  • [Presentation] 局所特徴量を用いた構音障害者の音声認識の検討2009

    • Author(s)
      宮本千琴, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2009年秋季研究発表会
    • Place of Presentation
      日本大学 工学部(福島県)
    • Year and Date
      2009-09-15
    • Related Report
      2009 Annual Research Report
  • [Presentation] 構音障害者の連続音声認識の検討2009

    • Author(s)
      宮本千琴, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2009年春季研究発表会
    • Place of Presentation
      東京
    • Year and Date
      2009-03-17
    • Related Report
      2009 Final Research Report 2008 Annual Research Report
  • [Presentation] Toshitaka Nakabayashi Integration of Metamodel and Acoustic Model for Speech Recognition2008

    • Author(s)
      H ironori Matsumasa, Tetsuya Takiguchi, Yasuo Ariki, Ichao Li
    • Organizer
      Interspeech2008
    • Place of Presentation
      Brisbane, Australia
    • Year and Date
      2008-09-29
    • Related Report
      2009 Final Research Report
  • [Presentation] Integration of Metamodel and Acoustic Model for Speech Recognition2008

    • Author(s)
      Hironori Matsumasa, Tetsuya Takiguchi, Yasuo Ariki, Ichao LI, Toshitaka Nakabayashi
    • Organizer
      Interspeech2008
    • Place of Presentation
      Brisbane, Australia
    • Year and Date
      2008-09-25
    • Related Report
      2008 Annual Research Report
  • [Presentation] メタモデルと音響モデルの統合による構音障害者の音声認識2008

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2008年秋季研究発表会
    • Place of Presentation
      福岡
    • Year and Date
      2008-09-11
    • Related Report
      2008 Annual Research Report
  • [Presentation] メタモデルと音響モデルの統合による構音障害者の音声認識2008

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      神戸
    • Year and Date
      2008-05-29
    • Related Report
      2009 Final Research Report 2008 Annual Research Report
  • [Presentation] 話者正規化に基づく構音障害者の音声認識2008

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2009 Final Research Report
  • [Presentation] 話者正規化に基づく構音障害者の音声認識2008

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯:
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉工業大学
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 子どもたちの話し言葉やコミュニケーションを育てる支援技術2007

    • Author(s)
      中林稔堯, 岸田大輔, 石原洋
    • Organizer
      第18回障害児教育研究協議会
    • Place of Presentation
      神戸
    • Year and Date
      2007-11-17
    • Related Report
      2009 Final Research Report
  • [Presentation] 子どもたちの話し言葉やコミュニケーションを育てる支援技術2007

    • Author(s)
      中林稔堯, 岸田大輔, 石原 洋
    • Organizer
      第18回障害児教育研究協議会
    • Place of Presentation
      神戸大学発達科学部附属特別支援学校
    • Year and Date
      2007-11-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 脳性麻痺構音障害者の音声認識による情報家電操作の検討2007

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      山梨
    • Year and Date
      2007-09-21
    • Related Report
      2009 Final Research Report
  • [Presentation] 脳性麻痺構音障害者の音声認識による情報家電操作の検討2007

    • Author(s)
      松政宏典, 滝口哲也, 有木康雄, 李義昭, 中林稔堯:
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      山梨大学
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] Nakabayashi PCA-Based Feature Extraction for Fluctuation in Speaking Style of Articulation2007

    • Author(s)
      Hironori Matsumasa, Tetsuya Takiguchi, Yasuo Ariki, Ichao LI, Toshitaka
    • Organizer
      Disorders Interspeech2007
    • Place of Presentation
      Belgium
    • Year and Date
      2007-08-29
    • Related Report
      2009 Final Research Report
  • [Presentation] PCA-Based Feature Extraction for Fluctuation in Speaking Style of Articulation Disorders2007

    • Author(s)
      Hironori Matsumasa, Tetsuya Takiguchi, Yasuo Ariki, Ichao LI, Toshitaka Nakabayashi
    • Organizer
      Interspeech2007
    • Place of Presentation
      ベルギー
    • Year and Date
      2007-08-29
    • Related Report
      2007 Annual Research Report
  • [Presentation] 情報家電操作における脳性麻痺構音障害者の音声認識評価2007

    • Author(s)
      松政宏典, 田中克幸, 滝口哲也, 有木康雄, 李義昭, 中林稔堯
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      沖縄
    • Year and Date
      2007-05-24
    • Related Report
      2009 Final Research Report
  • [Presentation] 情報家電操作における脳性麻痺構音障害者の音声認識評価2007

    • Author(s)
      松政宏典, 滝口哲也, 田中克幸, 有木康雄, 李義昭, 中林稔堯:
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      琉球大学
    • Year and Date
      2007-05-24
    • Related Report
      2007 Annual Research Report

URL: 

Published: 2007-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi