• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A study of Information Access by making use of Latent Spaces shared across Modalities and Languages

Research Project

Project/Area Number 19K11980
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 60080:Database-related
Research InstitutionToyohashi University of Technology

Principal Investigator

Akiba Tomoyosi  豊橋技術科学大学, 工学(系)研究科(研究院), 准教授 (00356346)

Project Period (FY) 2019-04-01 – 2022-03-31
Project Status Completed (Fiscal Year 2021)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥2,340,000 (Direct Cost: ¥1,800,000、Indirect Cost: ¥540,000)
Fiscal Year 2019: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Keywords情報アクセス / 情報検索 / 系列変換モデル / 潜在空間 / 音声認識 / 機械翻訳 / 音声翻訳 / 音声ドキュメント検索 / モダリティ横断 / 言語横断 / 系列変換 / リカレントニューラルネットワーク
Outline of Research at the Start

本研究では、多種多様な情報の対応付けや相補的利用のために、モダリティや言語の差異を横断する情報アクセス手法の開発を目的とする。この目的のために、ニューラルネットワークを用いた系列変換の枠組みを適用して、多様な表現を横断する変換手法を開発する。また、種々の系列変換の過程で得られる潜在空間を共通化することにより、多様な情報を射影する共通の潜在空間を構築し、それを情報アクセスに利用する手法を開発する。

Outline of Final Research Achievements

Thanks to the recent development on information technology, spoken and written modalities have become to be used exchangeably for human communication, and then to be recorded in repository without distinction. On the other hand, a variety of languages are spoken and written in the world. In order to access information recorded in such various modalities and languages, some IR methods for crossing them are indispensable. This study aims to develop an information access method to connect various information form such as modalities and languages and to make use of each of them complementarily. To this end, we developed several information transformation methods using sequence-to-sequence models with the help of latent spaces shared with the various information form.

Academic Significance and Societal Importance of the Research Achievements

言葉の情報は音声およびテキストの両モダリティで分け隔てなく表現されつつあり、かつ世界規模では多様な言語で表現されている。モダリティや言語の違いから多様な表現形態を取りうる言語情報を、系列変換モデルという統一的な枠組みをベースに、相互に変換する手法を実現するとともに、系列変換モデルを効果的に学習する手法を開発した。本研究の成果により、現実世界の不均質な情報の利用が促進されるとともに、個々の表現形態の利点を活用する技術の開発が進むと考えられる。

Report

(4 results)
  • 2021 Annual Research Report   Final Research Report ( PDF )
  • 2020 Research-status Report
  • 2019 Research-status Report
  • Research Products

    (30 results)

All 2022 2021 2020 2019

All Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (25 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Agenda Extraction from Assembly Minutes by exploiting Relation between Questions and Answers2021

    • Author(s)
      Ohsugi Ryoto、Akiba Tomoyosi、Masuyama Shigeru
    • Journal Title

      Proceedings of 8th International Conference on Advanced Informatics: Concepts, Theory and Applications (ICAICTA)

      Volume: 1 Pages: 1-6

    • DOI

      10.1109/icaicta53211.2021.9640253

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Development of Political QA Systems aimed at Assembly Minutes based on Abstractive Summarization2021

    • Author(s)
      Kawai Teruya、Akiba Tomoyosi、Masuyama Shigeru
    • Journal Title

      Proceedings of 8th International Conference on Advanced Informatics: Concepts, Theory and Applications (ICAICTA)

      Volume: 1 Pages: 1-5

    • DOI

      10.1109/icaicta53211.2021.9640248

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Multi-label Disease Classification of Patient’s Tweets using Automatically Acquired Training Corpus2020

    • Author(s)
      Tomohiro Okuda, Reine Asakawa, Tomoyosi Akiba
    • Journal Title

      Proceedings of International Conference on Advanced Informatics: Concepts, Theory and Applications (ICAICTA)

      Volume: -

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] English-Japanese Machine Translation for Lecture Subtitles using Back-Translation and Transfer Learning2020

    • Author(s)
      Yamagishi Yuuki、Akiba Tomoyosi、Tsukada Hajime
    • Journal Title

      Proceedings of 2020 IEEE 9th Global Conference on Consumer Electronics (GCCE)

      Volume: - Pages: 728-730

    • DOI

      10.1109/gcce50665.2020.9291882

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] Using a Sequence-to-sequence Model for Large-scale Automated ICD Coding2019

    • Author(s)
      Hatanaka Hiroki、Akiba Tomoyosi
    • Journal Title

      Proceedings of 2019 International Conference of Advanced Informatics: Concepts, Theory and Applications (ICAICTA)

      Volume: 1 Pages: 1-6

    • DOI

      10.1109/icaicta.2019.8904397

    • Related Report
      2019 Research-status Report
    • Peer Reviewed
  • [Presentation] Iterative Back Translationと離散音声表現を用いた音声認識のためのデータ拡張2022

    • Author(s)
      高木景矢, 秋葉友良, 塚田元
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2021 Annual Research Report
  • [Presentation] Iterative Back-translationは対訳語彙を獲得できるか?2022

    • Author(s)
      谷川琢磨, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] ラウンドトリップ翻訳を用いたニューラル機械翻訳のデータ拡張2022

    • Author(s)
      紺谷優志, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] パッセージ検索と含意関係認識による議会議事録を対象としたファクトチェック2022

    • Author(s)
      我藤勇樹, 秋葉友良
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 議会における明示的な賛否表現を含まない議員発言を対象としたスタンス分類データセットの構築と評価2022

    • Author(s)
      猫本隆哲, 秋葉友良, 増山繁
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] ニューラル機械翻訳のための日本語の膠着語的性質を考慮したマルチタスク学習2022

    • Author(s)
      西田悠人, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 翻訳の品質評価に基づく動的な混成サンプリングによるNMTの双方向反復逆翻訳手法の改善2022

    • Author(s)
      森田知熙, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 入力側単言語資源と転移学習の利用による講演字幕を対象とした英日ニューラル機械翻訳の改善2022

    • Author(s)
      山岸勇輝, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 双方向翻訳モデルと反復的逆翻訳を用いた低資源言語に対するニューラル機械翻訳の性能向上2022

    • Author(s)
      Bui Tuan Thanh, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] End-to-End音声翻訳のためのデータ拡張の検討2021

    • Author(s)
      高木景矢,秋葉友良,塚田元
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report
  • [Presentation] NMT の双方向反復的教師なし適応手法における初期対訳コーパスサイズの影響と翻訳モデル獲得に関する調査2021

    • Author(s)
      藤澤兼太, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report
  • [Presentation] 議題への明示的な賛否表現を含まない議員発言を対象とした議会議事録のスタンス分類2021

    • Author(s)
      猫本隆哲, 秋葉友良, 増山繁
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report
  • [Presentation] Fine-Tuninng と混成的な逆翻訳サンプリングに基づく NMT の双方向反復的教師なし適応の改善2021

    • Author(s)
      森田知熙, 秋葉友良, 塚田元
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report
  • [Presentation] 議事録の質疑応答の対応関係に基づくクラスタリングによる議題の抽出2021

    • Author(s)
      大杉了斗, 秋葉友良, 増山繁
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report
  • [Presentation] akbl at the NTCIR-15 QA Lab-PoliInfo-2 Tasks2020

    • Author(s)
      Takanori Nekomoto, Ryoto Ohsugi, Tomoyosi Akiba, Shigeru Masuyama, Daiki Shirato
    • Organizer
      Proceedings of the 15th NTCIR Conference
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] ボトルネック特徴量の合成に基づく音声認識のためのデータ拡張の検討2020

    • Author(s)
      高木景矢, 秋葉友良, 塚田元
    • Organizer
      音学シンポジウム2020
    • Related Report
      2020 Research-status Report
  • [Presentation] ボトルネック特徴量の合成に基づく音声認識のためのデータ拡張の検討2020

    • Author(s)
      高木 景矢,秋葉 友良,塚田 元
    • Organizer
      日本音響学会2020年春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] End-to-Endとカスケード方式のアンサンブルによる音声翻訳の検討2020

    • Author(s)
      民谷 慎一郎,秋葉 友良,塚田 元
    • Organizer
      日本音響学会2020年春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] 擬似罹患ラベル付きデータを用いたツイートのマルチラベル疾病分類2020

    • Author(s)
      奥田智大,秋葉友良
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 汎用分散表現BERTを用いたニューラル機械翻訳の検討2020

    • Author(s)
      高橋竜,秋葉友良,塚田元
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] ニューラル機械翻訳における双方向反復的教師なし適応の改善2020

    • Author(s)
      藤澤兼太,秋葉友良,塚田元
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] Twitter上の対話に着目した罹患者への定型的応答の自動抽出2020

    • Author(s)
      浅川玲音,秋葉友良
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] sequence-to-sequence モデルを用いた疾病表現への大規模医療コードの自動付与2020

    • Author(s)
      畑中裕貴,秋葉友良
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 逆翻訳を用いたデータ拡張と転移学習を利用した英日講演字幕翻訳の改善2020

    • Author(s)
      山岸勇輝,秋葉友良,塚田元
    • Organizer
      言語処理学会第26回年次大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 複数の音声認識結果表現を用いた系列変換モデルによる音声翻訳システムの検討2019

    • Author(s)
      民谷慎一郎,秋葉友良,塚田元
    • Organizer
      日本音響学会秋季研究発表会
    • Related Report
      2019 Research-status Report

URL: 

Published: 2019-04-18   Modified: 2023-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi