外国語ニュース・講演の音声同時通訳方式に関する研究

2016 年度 実績報告書

• 研究課題/領域番号: 24240032
• 研究機関: 奈良先端科学技術大学院大学
• 研究代表者: 中村 哲 奈良先端科学技術大学院大学, 情報科学研究科, 教授 (30263429)
• 研究分担者: 松本 裕治 奈良先端科学技術大学院大学, 情報科学研究科, 教授 (10211575) ; サクリアニ サクティ 奈良先端科学技術大学院大学, 情報科学研究科, 助教 (00395005) ; Neubig Graham 奈良先端科学技術大学院大学, 情報科学研究科, 助教 (70633428) ; 高道 慎之介 東京大学, 大学院情報理工学系研究科, 特任助教 (90784330)
• 研究期間 (年度): 2012-05-31 – 2017-03-31
• キーワード: 音声翻訳

研究実績の概要

①同時通訳基本方式研究：平成28年度は、音声認識にボトムアップパーザを適用し、次に来る構文要素を機械学習により予測し、それにより訳出を行うかどうかを判定する方式の改良を行った。また、注意型ニューラル翻訳の研究を進めた。
②コミュニケーション評価：音声認識における置換、挿入、脱落誤りに対する発話者の反応測定を行ない、認知負荷の測定、改良を行った。
③同時通訳コーパス構築、プロトタイプ構築：平成28年度は、講義５コマ分の日英翻訳を行った。

現在までの達成度 (段落)

28年度が最終年度であるため、記入しない。

今後の研究の推進方策

28年度が最終年度であるため、記入しない。

研究成果

• [国際共同研究] インドネシア大学/バンドン工科大学(インドネシア)
  • 国名: インドネシア
  • 外国機関名: インドネシア大学/バンドン工科大学
• [国際共同研究] ベトナム国家大学ハノイ校工科大学(ベトナム)
  • 国名: ベトナム
  • 外国機関名: ベトナム国家大学ハノイ校工科大学
• [雑誌論文] Reinforcement Learning of Multi-Party Trading Dialog Policies (2016)
  • 著者名/発表者名: Takuya Hiraoka, Kallirroi Georgila, Elnaz Nouri, David Traum, Satoshi Nakamura
  • 雑誌名: 人工知能学会論文誌 巻: 31 ページ: pp.1-14
  • DOI: 10.1527/tjsai.B-FC1
  • 査読あり / オープンアクセス / 国際共著 / 謝辞記載あり
• [雑誌論文] Preserving Word-level Emphasis in Speech-to-speech Translation (2016)
  • 著者名/発表者名: Quoc Truong Do, Tomoki Toda, Graham Neubig, Sakriani Sakti and Satoshi Nakamura
  • 雑誌名: IEEE Transactions on Audio, Speech and Language Processing 巻: vol. 25 no.3 ページ: pp.544-556
  • DOI: 10.1109/TASLP.2016.2643280
  • 査読あり / オープンアクセス / 国際共著 / 謝辞記載あり
• [雑誌論文] Learning cooperative persuasive dialogue policies using framing (2016)
  • 著者名/発表者名: Takuya Hiraoka, Graham Neubig, Sakriani Sakti, Tomoki Toda and Satoshi Nakamura
  • 雑誌名: Speech Communication 巻: vol.84 ページ: pp.83-96
  • DOI: 10.1016/j.specom.2016.09.002
  • 査読あり / オープンアクセス / 国際共著 / 謝辞記載あり
• [雑誌論文] 中間言語情報を記憶するピボット翻訳手法 (2016)
  • 著者名/発表者名: 三浦明波, Graham Neubig, Sakriani Sakti, 戸田智基, 中村哲
  • 雑誌名: 自然言語処理 巻: vol.23 no.5 ページ: pp.499-528
  • DOI: 10.5715/jnlp.23.499
  • 査読あり / オープンアクセス / 謝辞記載あり
• [学会発表] Combination of State Clustering and Adaptive Training for modeling continuous Word-level Emphasis (2017)
  • 著者名/発表者名: Do Quoc Truong，戸田 智基，Sakriani Sakti，中村 哲
  • 学会等名: 日本音響学会春季研究発表会
  • 発表場所: 明治大学（神奈川県・川崎市）
  • 年月日: 2017-03-15 – 2017-03-17
• [学会発表] Learning Feature Transformations Without Supervision to Support DPGMM Based Representation Learning (2017)
  • 著者名/発表者名: Michael Heck，中村 哲，Sakriani Sakti
  • 学会等名: 日本音響学会春季研究発表会
  • 発表場所: 明治大学（神奈川県・川崎市）
  • 年月日: 2017-03-15 – 2017-03-17
• [学会発表] ニューラル機械翻訳におけるミニバッチ構成法の違いによる影響の調査 (2017)
  • 著者名/発表者名: 森下 睦, 小田 悠介, Graham Neubig, 吉野 幸一郎, 須藤 克仁, 中村 哲
  • 学会等名: 言語処理学会第23回年次大会
  • 発表場所: 筑波大学（茨城県・つくば市）
  • 年月日: 2017-03-13 – 2017-03-17
• [学会発表] 同時音声翻訳のための構文情報を用いた文分割に基づく機械翻訳 (2016)
  • 著者名/発表者名: 帖佐克己、小田悠介、Sakriani Sakti、吉野幸一郎、中村 哲
  • 学会等名: 第3回自然言語処理シンポジウム
  • 発表場所: NTT武蔵野研究開発センタ（東京都・武蔵野市）
  • 年月日: 2016-12-21 – 2016-12-22
• [学会発表] 音声研究と自然言語研究の融合に向けて-音声翻訳研究の過去と未来 (2016)
  • 著者名/発表者名: 中村 哲
  • 学会等名: 第18回音声言語シンポジウム
  • 発表場所: NTT武蔵野研究開発センタ（東京都・武蔵野市）
  • 年月日: 2016-12-20 – 2016-12-21
  • 招待講演
• [学会発表] ハードアテンション用いた注意型ニューラルネットワークによる音声翻訳 (2016)
  • 著者名/発表者名: ク チュオン ド, サクリアニ サクティ, グラム ニュービック, 中村 哲
  • 学会等名: 第18回音声言語シンポジウム
  • 発表場所: NTT武蔵野研究開発センタ（東京都・武蔵野市）
  • 年月日: 2016-12-20 – 2016-12-21
• [学会発表] コクレオグラムとスペクトログラムを用いた深層学習音声認識 (2016)
  • 著者名/発表者名: アンドロス チャンドラ, サクリアーニ サクティ, ミルナ アドリアーニ, 中村 哲
  • 学会等名: 第18回音声言語シンポジウム
  • 発表場所: NTT武蔵野研究開発センタ（東京都・武蔵野市）
  • 年月日: 2016-12-20 – 2016-12-21
• [学会発表] ITERATIVE TRAINING OF A DPGMM-HMM ACOUSTIC UNIT RECOGNIZER IN A ZERO RESOURCE SCENARIO (2016)
  • 著者名/発表者名: Michael Heck, Sakriani Sakti, Satoshi Nakamura
  • 学会等名: SLT 2016
  • 発表場所: サンディエゴ（米国）
  • 年月日: 2016-12-13 – 2016-12-16
  • 国際学会
• [学会発表] DEEP BOTTLENECK FEATURES AND SOUND-DEPENDENT I-VECTORS FOR SIMULTANEOUS RECOGNITION OF SPEECH AND ENVIRONMENTAL SOUNDS (2016)
  • 著者名/発表者名: Sakriani Sakti, Seiji Kawanishi, Graham Neubig, Koichiro Yoshino, Satoshi Nakamura
  • 学会等名: SLT 2016
  • 発表場所: サンディエゴ（米国）
  • 年月日: 2016-12-13 – 2016-12-16
  • 国際学会
• [学会発表] Unsupervised Joint Estimation of Grapheme-to-Phoneme Conversion Systems and Acoustic Model Adaptation for Non-Native Speech Recognition (2016)
  • 著者名/発表者名: Satoshi Tsujioka, Sakriani Sakti, Koichiro Yoshino, Graham Neubig, Satoshi Nakamura
  • 学会等名: Interspeech 2016
  • 発表場所: サンフランシスコ（米国）
  • 年月日: 2016-09-08 – 2016-09-12
  • 国際学会
• [学会発表] Supervised Learning of Acoustic Models in a Zero Resource Setting to Improve DPGMM Clustering (2016)
  • 著者名/発表者名: Michael Heck, Sakriani Sakti, Satoshi Nakamura
  • 学会等名: Interspeech 2016
  • 発表場所: サンフランシスコ（米国）
  • 年月日: 2016-09-08 – 2016-09-12
  • 国際学会
• [学会発表] Transferring Emphasis in Speech Translation Using Hard-Attentional Neural Network Models (2016)
  • 著者名/発表者名: Quoc Truong Do, Sakriani Sakti, Graham Neubig, Satoshi Nakamura
  • 学会等名: Interspeech 2016
  • 発表場所: サンフランシスコ（米国）
  • 年月日: 2016-09-08 – 2016-09-12
  • 国際学会
• [学会発表] A Hybrid System for Continuous Word-Level Emphasis Modeling Based on HMM State Clustering and Adaptive Training (2016)
  • 著者名/発表者名: Quoc Truong Do, Tomoki Toda, Graham Neubig, Sakriani Sakti, Satoshi Nakamura
  • 学会等名: Interspeech 2016
  • 発表場所: サンフランシスコ（米国）
  • 年月日: 2016-09-08 – 2016-09-12
  • 国際学会
• [学会発表] 木構造を中間表現とするピボット翻訳手法 (2016)
  • 著者名/発表者名: 三浦 明波, Graham Neubig, 中村 哲
  • 学会等名: 第227回自然言語処理研究発表会
  • 発表場所: 岡山県立大学（岡山県・総社市）
  • 年月日: 2016-07-29 – 2016-07-30
• [学会発表] Bridging different Languages, Countries, and Cultures by Speech to Speech Translation Research (2016)
  • 著者名/発表者名: Satoshi Nakamura
  • 学会等名: InterACT 2015
  • 発表場所: バーデンバーデン（ドイツ）
  • 年月日: 2016-07-14 – 2016-07-16
  • 国際学会 / 招待講演
• [学会発表] Selecting Syntactic, Non-redundant Segments in Active Learning for Machine Translation (2016)
  • 著者名/発表者名: Akiva Miura, Graham Neubig, Michael Paul, Satoshi Nakamura
  • 学会等名: NAACL HLT 2016
  • 発表場所: サンディエゴ（米国）
  • 年月日: 2016-06-12 – 2016-06-17
  • 国際学会
• [学会発表] 様々な分野における対訳コーパスを用いた構文解析器の自己学習効果の検証 (2016)
  • 著者名/発表者名: 森下 睦, 小田 悠介, Graham Neubig, 吉野 幸一郎, 中村 哲
  • 学会等名: 情報処理学会 第226回自然言語処理研究会
  • 発表場所: 東京工業大学（東京都・目黒区）
  • 年月日: 2016-05-16 – 2016-05-17
• [学会発表] Unsupervised Linear Discriminant Analysis for Supporting DPGMM Clustering in the Zero Resource Scenario (2016)
  • 著者名/発表者名: Michael Heck, Sakriani Sakti, Satoshi Nakamura
  • 学会等名: SLTU 2016
  • 発表場所: ジョグジャカルタ（インドネシア）
  • 年月日: 2016-05-09 – 2016-05-12
  • 国際学会
• [産業財産権] 構文評価装置、翻訳装置、構文評価方法及び構文評価プログラム (2016)
  • 発明者名: 小田 悠介、Graham Neubig、中村 哲 他
  • 権利者名: 小田 悠介、Graham Neubig、中村 哲 他
  • 産業財産権種類: 特許
  • 産業財産権番号: PCT/JP2016/055186
  • 出願年月日: 2016-09-09
• [産業財産権] テキストデータ分割装置、テキストデータ分割方法、テキストデータ分割プログラム及び翻訳装置 (2013)
  • 発明者名: 藤田 朋希、Graham Neubig、中村哲 他
  • 権利者名: 藤田 朋希、Graham Neubig、中村哲 他
  • 産業財産権種類: 特許
  • 産業財産権番号: P150011337
  • 出願年月日: 2013-05-07
  • 取得年月日: 2017-02-17