All-words Word Sense Disambiguation in Japanese using Local Context

• Project/Area Number: 15K16046
• Research Category: Grant-in-Aid for Young Scientists (B)
• Allocation Type: Multi-year Fund
• Research Field: Intelligent informatics
• Research Institution: Ibaraki University
• Principal Investigator: Komiya Kanako 茨城大学, 理工学研究科(工学野), 講師 (10592339)
• Research Collaborator: Suzuki Rui 茨城大学, 工学部, 学生
• Project Period (FY): 2015-04-01 – 2019-03-31
• Project Status: Completed (Fiscal Year 2018)
• Budget Amount: ¥3,900,000 (Direct Cost: ¥3,000,000、Indirect Cost: ¥900,000); Fiscal Year 2017: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000); Fiscal Year 2016: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000); Fiscal Year 2015: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
• Keywords: 語義曖昧性解消 / 教師なし学習 / All-words / all-words / 語義 / 分散表現 / all-word / 日本語

Outline of Final Research Achievements

We developed an unsupervised algorithm to identify the meaning of every word in a corpus. The target language is Japanese.
We used surrounding word vectors, which are the word embeddings generated via deep learning method and synonyms of the target words.

Academic Significance and Societal Importance of the Research Achievements

日本語を対象としたall-wordsの語義曖昧性解消（文中の全ての単語を対象として単語が辞書のどの意味を持っているのかを同定するタスク）を行う仕組みを提案した．文例集と正解を与えなくても語義曖昧性解消を行う仕組みを提案することができた．
また，この際に使うディープ・ラーニング技術の適切なパラメータや繰り返し回数についても実験によって明らかにした．

Research Products

• [Journal Article] 概念辞書の類義語と分散表現を利用した教師なし all-words WSD (2019)
  • Author(s): 鈴木類, 古宮嘉那子, 浅原正幸, 佐々木稔, 新納浩幸
  • Journal Title: Journal of Natural Language Processing Volume: 印刷中
  • NAID: 130007706831
  • Peer Reviewed / Open Access
• [Journal Article] Comparison of Methods to Annotate Named Entity Corpora (2018)
  • Author(s): Kanako Komiya, Masaya Suzuki, Tomoya Iwakura, Minoru Sasaki, Hiroyuki Shinnou
  • Journal Title: Transactions on Asian and Low-Resource Language Information Processing Volume: 34 Issue: 4 Pages: 1-16
  • DOI: 10.1145/3218820
  • Peer Reviewed / Open Access
• [Journal Article] Domain Adaptation using Word Embeddings for Word Sense Disambiguation (2018)
  • Author(s): Komiya Kanako、Sasaki Minoru、Shinnou Hiroyuki、Okumura Manabu
  • Journal Title: Journal of Natural Language Processing Volume: 25 Issue: 4 Pages: 463-480
  • DOI: 10.5715/jnlp.25.463
  • NAID: 130007531009
  • Peer Reviewed / Open Access
• [Journal Article] nwjc2vec: Word Embedding Data Constructed from NINJAL Web Japanese Corpus (2017)
  • Author(s): Shinnou Hiroyuki、Asahara Masayuki、Komiya Kanako、Sasaki Minoru
  • Journal Title: Journal of Natural Language Processing Volume: 24 Issue: 5 Pages: 705-720
  • DOI: 10.5715/jnlp.24.705
  • NAID: 130006507387
  • ISSN: 1340-7619, 2185-8314
  • Peer Reviewed / Open Access
• [Journal Article] Cross-lingual Product Recommendation System Using Collaborative Filtering (2017)
  • Author(s): Komiya Kanako、Sasaki Minoru、Shinnou Hiroyuki、Kotani Yoshiyuki
  • Journal Title: Journal of Natural Language Processing Volume: 24 Issue: 4 Pages: 579-596
  • DOI: 10.5715/jnlp.24.579
  • NAID: 130006250430
  • ISSN: 1340-7619, 2185-8314
  • Peer Reviewed / Open Access
• [Journal Article] クラスタリングを利用した語義曖昧性解消の誤り原因のタイプ分け (2015)
  • Author(s): 新納浩幸，村田真樹，白井清昭，福本文代，藤田早苗，佐々木稔，古宮嘉那子，乾孝司
  • Journal Title: 自然言語処理 Volume: 22 Pages: 319-362
  • NAID: 130005131982
  • Peer Reviewed
• [Presentation] All-words Word Sense Disambiguation Using Concept Embeddings (2018)
  • Author(s): Rui Suzuki, Kanako Komiya, Masayuki Asahara, Minoru Sasaki and Hiroyuki Shinnou
  • Organizer: Proceedings of the 11th Edition of its Language Resources and Evaluation Conference
  • Int'l Joint Research
• [Presentation] All-words Word Sense Disambiguation Using Concept Embeddings (2018)
  • Author(s): Rui Suzuki, Kanako Komiya, Masayuki Asahara, Minoru Sasaki and Hiroyuki Shinnou
  • Organizer: LREC 2018
  • Int'l Joint Research
• [Presentation] 教師データを用いた語義の分散表現の構築 (2017)
  • Author(s): 山木 翔馬 新納 浩幸 古宮 嘉那子 佐々木 稔,
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] 分散表現に基づく日本語語義曖昧性解消における類義語と辞書定義文を併用した語義表現の有効性 (2017)
  • Author(s): 遊佐 宣彦 佐々木 稔 古宮 嘉那子 新納 浩幸
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] 『分類語彙表』の類義語と分散表現を利用したall-words語義曖昧性解消 (2017)
  • Author(s): 鈴木類, 古宮 嘉那子, 浅原 正幸, 佐々木 稔, 新納 浩幸
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] 画像キャプション生成における複数形表現の統一 (2017)
  • Author(s): 西友佑 新納 浩幸 古宮 嘉那子 佐々木 稔,
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] 固有表現抽出におけるタグセットの相互適応 (2017)
  • Author(s): 鈴木雅也, 古宮 嘉那子, 佐々木 稔, 新納 浩幸
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] 用例文拡張辞書を利用したトピックモデルに基づく新語義検出 (2017)
  • Author(s): 神宮理織 佐々木稔 古宮 嘉那子 新納浩幸
  • Organizer: 言語処理学会第23回年次大会
  • Place of Presentation: 筑波
  • Year and Date: 2017-03-13
• [Presentation] Comparison of Distributed Representations and Context Vectors for Japanese Onomatopoeia Classifiation (2017)
  • Author(s): Kanako Komiya, Minoru Sasaki, and Hiroyuki Shinnou
  • Organizer: CICLING 2018
  • Int'l Joint Research
• [Presentation] Japanese all-words WSD system using the Kyoto Text Analysis ToolKit (2017)
  • Author(s): Hiroyuki Shinnou, Kanako Komiya, Minoru Sasaki and Shinsuke Mori
  • Organizer: PACLIC 2017
  • Int'l Joint Research
• [Presentation] Domain Adaptation for Document Classification by Alternately Using Semi-supervised Learning and Feature Weighted Learning (2017)
  • Author(s): Hiroyuki Shinnou, Kanako Komiya, Minoru Sasaki
  • Organizer: PACLING 2017
  • Int'l Joint Research
• [Presentation] Domain Adaptation for Word Sense Disambiguation Using Word Embeddings (2017)
  • Author(s): Kanako Komiya, Shota Suzuki, Minoru Sasaki, Hiroyuki Shinnou, and Manabu Okumura
  • Organizer: CICLING 2017
  • Int'l Joint Research
• [Presentation] 係り受け関係を用いた短単位の単語ベクトルから長単位の単語ベクトルの合成 (2017)
  • Author(s): 清藤 拓実，古宮 嘉那子，佐々木 稔，新納 浩幸
  • Organizer: 言語処理学会第24回年次大会
• [Presentation] 『岩波国語辞典』の語義タグを用いたall-wordsの語義曖昧性解消 (2017)
  • Author(s): 平林 照雄，鈴木 類，古宮 嘉那子，浅原 正幸，佐々木 稔，新納 浩幸
  • Organizer: 言語処理学会第24回年次大会
• [Presentation] 単義語の分散表現と単語間の係り受け関係を用いた語義曖昧性解消 (2017)
  • Author(s): 遊佐 宣彦，佐々木 稔，古宮 嘉那子，新納 浩幸
  • Organizer: 言語処理学会第24回年次大会
• [Presentation] ターゲット領域のキーワード含有率を事例の重みとした感情分析の領域適応 (2017)
  • Author(s): 白 静，古宮 嘉那子，新納 浩幸
  • Organizer: 言語処理学会第24回年次大会
• [Presentation] nwjc2vec の効果的な fine-tuning のためのパラメータ設定 (2017)
  • Author(s): 熊谷 佳奈，古宮 嘉那子，新納 浩幸
  • Organizer: 言語処理学会第24回年次大会
• [Presentation] 角度に基づく格子基底の判定条件：α-reduced (2017)
  • Author(s): 萩野谷一二，古宮 嘉那子，黒澤馨
  • Organizer: SCIS2018
• [Presentation] 深層学習と合議を用いた極性分類 (2017)
  • Author(s): 金子顕之, 古宮 嘉那子, 佐々木 稔, 新納 浩幸
  • Organizer: 第11回テキストアナリティクス・シンポジウム
• [Presentation] 単義語と共起する多義語に対する分散表現を利用した語義分析 (2017)
  • Author(s): 遊佐宣彦, 佐々木 稔, 古宮 嘉那子, 新納 浩幸
  • Organizer: 言語資源活用ワークショップ2017
• [Presentation] nwjc2vec の fine-tuning (2017)
  • Author(s): 新納浩幸, 古宮 嘉那子, 佐々木 稔
  • Organizer: 言語資源活用ワークショップ2017
• [Presentation] 順方向多層 LSTM と分散表現を用いた教師あり学習による語義曖昧性解消 (2017)
  • Author(s): 新納 浩幸, 古宮 嘉那子, 佐々木 稔
  • Organizer: 情報処理学会 自然言語処理研究会
• [Presentation] Supervised Word Sense Disambiguation with Sentences Similarities from Context Word Embeddings (2016)
  • Author(s): Shoma Yamaki, Hiroyuki Shinnou, Kanako Komiya, Minoru Sasaki
  • Organizer: PACLIC 2016
  • Place of Presentation: Seoul, Korea
  • Year and Date: 2016-10-28
  • Int'l Joint Research
• [Presentation] Word Sense Disambiguation Using Active Learning with Pseudo Examples (2016)
  • Author(s): Minoru Sasaki, Katsumune Terauchi, Kanako Komiya, Hiroyuki Shinnou
  • Organizer: SEMAPRO 2016
  • Place of Presentation: Venice, Italy
  • Year and Date: 2016-10-09
  • Int'l Joint Research
• [Presentation] 擬似用例を追加する能動学習を用いた一般単語の語義曖昧性解消 (2016)
  • Author(s): 寺内 賢志, 佐々木 稔, 古宮 嘉那子, 新納 浩幸
  • Organizer: 情報処理学会 研究報告自然言語処理（NLP）
  • Place of Presentation: 大阪
  • Year and Date: 2016-09-29
• [Presentation] 固有表現抽出におけるアノテーション手法の比較 (2016)
  • Author(s): 鈴木 雅也, 古宮 嘉那子, 岩倉 友哉, 佐々木 稔, 新納 浩幸
  • Organizer: 情報処理学会 研究報告自然言語処理（NLP）
  • Place of Presentation: 大阪
  • Year and Date: 2016-09-29
• [Presentation] Selecting Training Data for Unsupervised Domain Adaptation in Word Sense Disambiguation (2016)
  • Author(s): Kanako Komiya, Minoru Sasaki, Hiroyuki Shinnou, Yoshiyuki Kotani and Manabu Okumura
  • Organizer: PRICAI 2016
  • Place of Presentation: Phuket, Thailand
  • Year and Date: 2016-08-22
  • Int'l Joint Research
• [Presentation] Comparison of Annotating Methods for Named Entity Corpora (2016)
  • Author(s): Kanako Komiya, Masaya Suzuki, Tomoya Iwakura, Minoru Sasaki, Hiroyuki Shinnou
  • Organizer: LAW-X 2016, Workshop of ACL 2016
  • Place of Presentation: Berlin, Germany
  • Year and Date: 2016-08-07
  • Int'l Joint Research
• [Presentation] Constructing a Japanese Basic Named Entity Corpus of Various Genres (2016)
  • Author(s): Tomoya Iwakura, Kanako Komiya, Ryuichi Tachibana
  • Organizer: NEWS 2016, Work Shop of ACL 2016
  • Place of Presentation: Berlin, Germany
  • Year and Date: 2016-08-07
  • Int'l Joint Research
• [Presentation] 点推定による日本語 all-words WSD システム KyWSD (2016)
  • Author(s): 新納 浩幸, 古宮 嘉那子, 佐々木 稔, 森 信介
  • Organizer: 情報処理学会 研究報告自然言語処理（NLP）
  • Place of Presentation: 岡山
  • Year and Date: 2016-07-29
• [Presentation] Estimating Concept Embeddings from Their Child Concepts (2016)
  • Author(s): Tatsuya Oono, Kanako Komiya, Minoru Sasaki, Hiroyuki Shinnou
  • Organizer: ICT-IPSC 2016
  • Place of Presentation: Bangkok, Thailand
  • Year and Date: 2016-05-26
  • Int'l Joint Research
• [Presentation] 分散表現による語義曖昧性解消の領域適応 (2016)
  • Author(s): 鈴木 翔太, 古宮 嘉那子, 佐々木 稔, 新納 浩幸, 奥村 学
  • Organizer: 情報処理学会 研究報告自然言語処理（NLP）
  • Place of Presentation: 東京
  • Year and Date: 2016-05-16
• [Presentation] 物語における登場人物の親しさ推定 (2016)
  • Author(s): 小井出 慎, 古宮 嘉那子 佐々木 稔, 新納 浩幸
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 概念辞書における子概念からの親概念の分散表現の推定 (2016)
  • Author(s): 大野 達也, 古宮 嘉那子, 佐々木 稔 , 新納 浩幸
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] KyTea を利用した日本語 all-words WSD (2016)
  • Author(s): 新納 浩幸, 森 信介, 古宮 嘉那子, 佐々木 稔
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 分散表現と文脈ベクトルによるオノマトぺの分類の比較 (2016)
  • Author(s): 古宮 嘉那子, 佐々木 稔, 新納 浩幸
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 半教師あり学習と素性の重み付け学習の交互適用による文書分類の領域適応 (2016)
  • Author(s): 新納 浩幸, 古宮 嘉那子, 佐々木 稔
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 分散表現に基づく日本語語義曖昧性解消における辞書定義文の有効性 (2016)
  • Author(s): 佐々木 稔, 古宮 嘉那子, 新納 浩幸
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 分散表現から得た用例間類似度を素性に加えた語義曖昧性解消 (2016)
  • Author(s): 山木 翔馬, 新納 浩幸, 古宮 嘉那子, 佐々木 稔
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] 類義語を利用した単語の分散表現から語義の分散表現の構築 (2016)
  • Author(s): 大内 克之, 新納 浩幸, 古宮 嘉那子, 佐々木 稔
  • Organizer: 第二十二回言語処理学会年次大会
  • Place of Presentation: 仙台
  • Year and Date: 2016-03-07
• [Presentation] ImplicitなHintを用いた因数分解に関する一考察 解ベクトルの長さと格子面積との関係 (2016)
  • Author(s): 萩野谷一二, 古宮 嘉那子
  • Organizer: 情報セキュリティ研究会（ISEC）電子情報通信学会研究報告
  • Place of Presentation: 東京
• [Presentation] 分散表現を用いた教師あり機械学習による語義曖昧性解消 (2015)
  • Author(s): 山木 翔馬，新納 浩幸，古宮 嘉那子，佐々木 稔
  • Organizer: 情報処理学会 自然言語処理研究会
  • Place of Presentation: 名古屋
  • Year and Date: 2015-12-03
• [Presentation] all-words WSD のための概念辞書の自動作成 (2015)
  • Author(s): 新納 浩幸，古宮 嘉那子，佐々木 稔
  • Organizer: 情報処理学会 自然言語処理研究会
  • Place of Presentation: 名古屋
  • Year and Date: 2015-12-03
• [Presentation] Hybrid Method of Semi-supervised Learning and Feature Weighted Learning for Domain Adaption of Document Classification (2015)
  • Author(s): Hiroyuki SHINNOU, Liying XIAO, Minoru SASAKI and Kanako KOMIYA
  • Organizer: PACLIC 2015
  • Place of Presentation: 中国 上海
  • Year and Date: 2015-10-31
  • Int'l Joint Research
• [Presentation] Unsupervised Domain Adaptation for Word Sense Disambiguation using Stacked Denoising Autoencoder (2015)
  • Author(s): Kazuhei KOUNO, Hiroyuki SHINNOU, Minoru SASAKI and Kanako KOMIYA
  • Organizer: PACLIC 2015
  • Place of Presentation: 中国 上海
  • Year and Date: 2015-10-31
  • Int'l Joint Research
• [Presentation] Learning under Covariate Shift for Domain Adaptation for Word Sense Disambiguation (2015)
  • Author(s): Hiroyuki SHINNOU, Minoru SASAKI and Kanako KOMIYA
  • Organizer: PACLIC 2015
  • Place of Presentation: 中国 上海
  • Year and Date: 2015-10-31
  • Int'l Joint Research
• [Presentation] Surrounding Word Sense Model for Japanese All-words Word Sense Disambiguation (2015)
  • Author(s): Kanako KOMIYA, Yuto SASAKI, Hajime MORITA, Minoru SASAKI, Hiroyuki SHINNOU, and Yoshiyuki KOTANI
  • Organizer: PACLIC 2015
  • Place of Presentation: 中国 上海
  • Year and Date: 2015-10-31
  • Int'l Joint Research
• [Presentation] Domain Adaptation with Filtering for Named Entity Extraction of Japanese Anime-Related Words (2015)
  • Author(s): Kanako KOMIYA, Daichi EDAMURA, Ryuta TAMURA, Minoru SASAKI, Hiroyuki SHINNOU and Yoshiyuki KOTANI
  • Organizer: RANLP 2015
  • Place of Presentation: ブルガリア ヒサリャ
  • Year and Date: 2015-09-05
  • Int'l Joint Research
• [Presentation] 複数ジャンルを対象とした基本固有表現タグ付きコーパスの作成 (2015)
  • Author(s): 岩倉 友哉 平田 亜衣 立花 竜一 山崎 舞子 市原 正陽 古宮 嘉那子
  • Organizer: 情報処理学会 自然言語処理研究会
  • Place of Presentation: 仙台
  • Year and Date: 2015-05-25
• [Presentation] Active Learning to Remove Source Instances for Domain Adaptation for Word Sense Disambiguation (2015)
  • Author(s): Hiroyuki SHINNOU, Yoshiyuki ONODERA, Minoru SASAKI and Kanako KOMIYA
  • Organizer: PACLING-2015
  • Place of Presentation: インドネシア バリ島
  • Year and Date: 2015-05-19
  • Int'l Joint Research