• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Annual Research Report

Individual-based and automatic clustering of World Englishes and its application to assist international communication

Research Project

Project/Area Number 26240022
Research InstitutionThe University of Tokyo

Principal Investigator

峯松 信明  東京大学, 大学院工学系研究科(工学部), 教授 (90273333)

Co-Investigator(Kenkyū-buntansha) 牧野 武彦  中央大学, 経済学部, 教授 (00269482)
山内 豊  東京国際大学, 商学部, 教授 (30306245)
齋藤 大輔  東京大学, 大学院工学系研究科(工学部), 講師 (40615150)
Project Period (FY) 2014-04-01 – 2018-03-31
Keywords世界諸英語 / 国際コミュニケーション / 発音の地図化 / 発音クラスタリング / 発音の構造的表象 / 外国語教育
Outline of Annual Research Achievements

現在最も優勢な国際語は英語であるが,国際社会でそれが使われる場合,多くが非母語話者の発声であり,当然,母語の影響を受ける。その結果英語は,発音・文法・語選択・綴り・談話戦略に至る様々な面で多様化している(World Englishes, 世界諸英語)。本研究では発音の多様性に着目する。母語訛りと言われるが,訛りは話者の言語背景に起因し,また厳密には話者毎に異なる。そして,この訛りによってコミュニケーションはしばしば阻害される。本研究では,世界中の話者から英語音声を収録している海外の世界諸英語研究者と協力を図りつつ,1)話者を単位とした世界諸英語の自動発音分類,2)分類結果の可視化に基づく発音の地図化,3)構築したシステムの教育利用について検討している。
本年度は,自動分類及び可視化に不可欠な二話者間の発音距離推定について,特徴量ストリームの多次元化や,DNNによる事後確率計算に基づいて,分布形状を陽に仮定しない f-divergence 計算法を検討し,一定の成果を得た。この DNN による事後確率計算とそれに基づく f-divergence 計算は,発音距離推定以外のタスクでも検討され,言語識別タスクでもその有効性を示すことができた。更に,DNNによる事後確率化に関しては,非母語話者音声の評価(母語話者英語との類似性評価)というタスクにおいても実験的に検討され,従来の HMM 事後確率に基づく手法より優れた性能を得ることができた。教育利用という観点かはら,学習者が発声できない音素に対して,学習後にその学習者が当該音素生成に対して行なうべき調音運動を(構造表象の考え方に基づき)推定する手法を考案し,更には,語学EXPO2017という,外国語教育者が多く集う発表会で,これらの研究成果について,報告し,情報交換することができた。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本研究で技術的精緻化を検討している音声の構造的表象は,発音距離推定及び発音の地図化というタスクで一定の成果を出しているのみならず,学習者が未学習の音素に対して,当該話者の当該音素に対する調音運動を推定するタスクや,更には,言語識別タスクにおいても有効性を示すことができた。なお,研究発表するには至らなかったが,訛った音声に対する嫌悪感を,軽備ななセンサーの出力に基づいて推定する技術開発も進めている。これらは最終年度において従来の検討事項と統合できればと考えている。また,世界諸英語コーパスを構築している米国 George Mason University の Weiberger 教授を訪問し,これまでの研究成果を報告し,有意義な情報交換の場をとることができた。更にはオランダ,Groningen 大学の研究チームに,本研究室で開発したプログラムを提供するなど,国際交流も推進することができた。雑誌論文,国際会議,国内会議などの大概発表や,また,比較的小規模であるが国際ワークショップを開催することもできた。

Strategy for Future Research Activity

次年度は最終年度となるが,これまで主として,世界諸英語発音の分類・クラスタリングをその地図化が主目的であった。最終年度は,更に訛った英語を「聞き手がどのように感じているのか」を推定する枠組みについて検討する。訛った発音に対する嫌悪感・非選好度の推定である。これらはアンケート調査をすれば数値化されたものが得られるが,ここでは,事後的な評価ではなく,それを聞いている時(オンライン処理中)の嫌悪感・非選好度を対象とする。既に本年度,簡易脳波計を使った聴取時の脳波計測を行い,嫌悪感に相当するものが予測できるか否かを検討したが,雑音が多く,良好な結果を得られなかった。次年度は,単に聞くだけをタスクとせず,まずは,聴取しながらオンラインタスク(例えばシャドーイング)を行なわせ,聴取者の意識的活動を通して,嫌悪感・聞き取り難さ・非選好度に相当するものを定義する。そして,可能であれば,意識的タスクを介せずに,定量的に計測可能となった嫌悪感・聞き取り難さ・非選好度について検討する。

  • Research Products

    (16 results)

All 2017 2016

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Acknowledgement Compliant: 1 results) Presentation (12 results) (of which Int'l Joint Research: 7 results,  Invited: 3 results) Book (1 results) Funded Workshop (1 results)

  • [Journal Article] 音声の構造的表象を用いた未観測音素の調音運動の推定2017

    • Author(s)
      内田秀継,齋藤大輔,峯松信明
    • Journal Title

      日本音響学会誌

      Volume: 印刷中 Pages: ー

    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 語彙サイズ,認識速度,処理の自動化を測定するオンラインL2語彙テストの開発2017

    • Author(s)
      山内豊,峯松信明,川村明美,西川恵,加藤集平
    • Journal Title

      LET Kanto Journal

      Volume: 1 Pages: 1-24

    • Peer Reviewed
  • [Presentation] OJADとそれを用いた音声指導2017

    • Author(s)
      峯松信明
    • Organizer
      イタリア日本語教育協会2017年研修会
    • Place of Presentation
      ローマ(イタリア)
    • Year and Date
      2017-03-17 – 2017-03-18
    • Int'l Joint Research / Invited
  • [Presentation] 話者を単位とした世界諸英語発音のクラスタリングと地図化2017

    • Author(s)
      峯松信明,塩澤文野,齋藤大輔
    • Organizer
      語学EXPO2017
    • Place of Presentation
      早稲田大学(東京)
    • Year and Date
      2017-03-05 – 2017-03-05
  • [Presentation] DNN-based GOP and its use for automatic assessment of shadowing speeches2017

    • Author(s)
      楽俊偉,塩澤文野,外山翔平,山内豊,伊藤佳世子,齋藤大輔,峯松 信明
    • Organizer
      情報処理研究会音声情報処理研究会
    • Place of Presentation
      琴平グランドホテル桜の抄(香川)
    • Year and Date
      2017-02-17 – 2017-02-18
  • [Presentation] IMPROVED PREDICTION OF THE ACCENT GAP BETWEEN SPEAKERS OF ENGLISH FOR INDIVIDUAL-BASED CLUSTERING OF WORLD ENGLISHES2016

    • Author(s)
      F. Shiozawa, D. Saito, and N. Minematsu
    • Organizer
      IEEE Workshop on Spoken Language Technology
    • Place of Presentation
      サンディエゴ(米国)
    • Year and Date
      2016-12-13 – 2016-12-16
    • Int'l Joint Research
  • [Presentation] Individual-based accent clustering of World Englishes using the Speech Accent Archive2016

    • Author(s)
      N. Minematsu
    • Organizer
      ASA & ASJ Joint Meeting
    • Place of Presentation
      ハワイ(米国)
    • Year and Date
      2016-11-28 – 2016-12-02
    • Int'l Joint Research / Invited
  • [Presentation] OJADとそれを用いた日本語音声指導ワークショップ2016

    • Author(s)
      峯松信明
    • Organizer
      釜山外国語大学日本語教育研修会
    • Place of Presentation
      釜山(韓国)
    • Year and Date
      2016-10-22 – 2016-10-22
    • Int'l Joint Research / Invited
  • [Presentation] Automatic Assessment and Error Detection of Shadowing Speech: Case of English Spoken by Japanese Learners2016

    • Author(s)
      S. Shi, Y. Kashiwagi, S. Toyama, J. Yue, Y. Yamauchi, D. Saito, and N. Minematsu
    • Organizer
      INTERSPEECH 2016
    • Place of Presentation
      サンフランシスコ(米国)
    • Year and Date
      2016-09-08 – 2016-09-12
    • Int'l Joint Research
  • [Presentation] Prediction of the articulatory movements of unseen phonemes of a speaker using the speech structure of another speaker2016

    • Author(s)
      H. Uchida, D. Saito, and N. Minematsu
    • Organizer
      INTERSPEECH 2016
    • Place of Presentation
      サンフランシスコ(米国)
    • Year and Date
      2016-09-08 – 2016-09-12
    • Int'l Joint Research
  • [Presentation] 世界諸英語発音分類を目的とした構造的特徴の不変性制御に関する検討2016

    • Author(s)
      塩澤文野,柏木陽佑,齋藤大輔,峯松信明
    • Organizer
      情報処理研究会音声情報処理研究会
    • Place of Presentation
      天童温泉・滝の湯(山形)
    • Year and Date
      2016-07-28 – 2016-07-30
  • [Presentation] Automatic Assessment and Error Detection of Shadowing Speech2016

    • Author(s)
      時書菊,楽俊偉,柏木陽佑,外山翔平,山内豊,齋藤大輔,峯松信明
    • Organizer
      情報処理研究会音声情報処理研究会
    • Place of Presentation
      天童温泉・滝の湯(山形)
    • Year and Date
      2016-07-28 – 2016-07-30
  • [Presentation] 識別的推定法に基づく音声の構造的表象を制約として用いたニューラルネットワーク音響モデルの話者適応2016

    • Author(s)
      柏木陽佑,齋藤大輔,峯松信明
    • Organizer
      情報処理研究会音声情報処理研究会
    • Place of Presentation
      天童温泉・滝の湯(山形)
    • Year and Date
      2016-07-28 – 2016-07-30
  • [Presentation] Improvement of naturalness of learners' spoken Japanese by practicing with the Web-based prosodic reading tutor, Suzuki-kun2016

    • Author(s)
      N. Minematsu, H. Hirano, N. Nakamura, and K. Oikawa
    • Organizer
      Speech Prosody 2016
    • Place of Presentation
      ボストン(米国)
    • Year and Date
      2016-05-31 – 2016-06-03
    • Int'l Joint Research
  • [Book] Occidente en Japon y Japon en Occidente (第4章,Use of Speech Synthesis Technologies to Facilitate Prosody Training of Japanese)2016

    • Author(s)
      N. Minematsu, H. Hirano, and N. Nakamura
    • Total Pages
      20
    • Publisher
      Universidad de Huelva Publicaciones
  • [Funded Workshop] Speech Prosody 2016 Satellite Workshop: OJAD ant its use for practical prosody training of Japanese2016

    • Place of Presentation
      ボストン(米国)
    • Year and Date
      2016-06-04 – 2016-06-04

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi