• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Identifying Usefulness of User Review Considering Mention of Target Entity

Research Project

Project/Area Number 23K11228
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61030:Intelligent informatics-related
Research InstitutionJapan Advanced Institute of Science and Technology

Principal Investigator

白井 清昭  北陸先端科学技術大学院大学, 先端科学技術研究科, 准教授 (30302970)

Co-Investigator(Kenkyū-buntansha) K. Natthawut  北陸先端科学技術大学院大学, 先端科学技術研究科, 講師 (40818100)
Project Period (FY) 2023-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,810,000 (Direct Cost: ¥3,700,000、Indirect Cost: ¥1,110,000)
Fiscal Year 2025: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2024: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2023: ¥2,080,000 (Direct Cost: ¥1,600,000、Indirect Cost: ¥480,000)
Keywordsレビューの有用性 / 評判情報分析 / 自然言語処理 / 機械学習
Outline of Research at the Start

通販サイトに投稿されたユーザレビューは,新しい製品を購入しようとするユーザにとって有益な情報である.しかし,製品を買っていないのにレビューを書いたり,製品以外のこと(ネットショップや配送業者)だけを書いたりするなど,中には有用ではないレビューも多く存在する.本研究は,製品に言及していないレビューを有用ではないレビューと定義し,製品レビューが有用か否かを判定することを目的とする.レビューと製品の説明文書の関連性を測ることで製品に言及したレビューを発見する手法と,製品以外のことに言及した特有の表現を学習することで製品に言及していないレビューを発見する手法を探究する.

Outline of Annual Research Achievements

本研究課題は製品に関する情報を含むという観点から製品レビューの有用性を定義し、有用なレビューとそうでないレビューを自動的に識別する手法を探究することを目的とする。これを実現するために、レビューの中から製品に関係のある記述を検出するアプローチと、製品に関係のない記述を検出するアプローチを組み合わせて用いる。
本年度は、前者のアプローチについて研究を実施した。まず、レビューが意見に対する根拠を含み、かつその意見が製品に関連するものであるとき、そのレビューは有用であると想定した。そして、レビュー中の2つの文の組が意見とその根拠を含むかを判定するモデルを学習した。訓練データとして、(1)既存の談話関係がアノテーションされたコーパスを流用したデータセット、(2)談話標識を手がかりに自動構築したデータセット、(3)Chat GPTを用いて生成したデータセットの3つを組み合わせて用いた。さらに、(1)のデータセットを第1段階、(2)と(3)のデータセットを第2段階として、事前学習済みBERTモデルを2段階に分けてファインチューニングする手法を提案した。実験の結果、3つのデータセットを併用することで意見・根拠関係の判定の性能を向上させることができた。
次に、意見とその根拠を含むと判定された文の組に対し、その意見が製品に関連しているかを判定した。「家電」「化粧品」といった製品のジャンル毎に、そのジャンルに固有のキーワードをあらかじめ抽出し、レビュー中の文の組がそれらのキーワードを含むかによって製品への関連性の有無を判定した。既存のTF・IDFに基づく手法、YAKE!に基づく手法に加え、エントロピーに基づく手法を提案し、これら3つの手法を組み合わせることの有効性を実験的に確認した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

製品に関連する記述を含むかという観点からレビューの有用性を判定する方法として、製品に関する文やキーワードをあらかじめ取得し、これを手がかりに有用性を判定する手法を探究することを計画していた。今年度の研究はおおむねこの指針に沿ったものであり、十分な成果が得られたことを確認した。したがって、本研究課題は当初の計画通りに進んでいると言える。

Strategy for Future Research Activity

製品に関係のある記述を検出するアプローチについては、これまでの研究をさらに発展させる予定である。具体的には、製品に関する情報をレビューだけではなく製品の説明文書からも得ることで、有用性判定の精度を向上させる。合わせて、製品に関係のな記述を検出するアプローチの研究にも着手する。有用でないレビューの集合を用意し、それに関する様々な埋め込み表現(抽象表現)を獲得することに取り組む。

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (1 results)

All 2024

All Presentation (1 results) (of which Int'l Joint Research: 1 results)

  • [Presentation] Identification of Opinion and Ground in Customer Review Using Heterogeneous Datasets2024

    • Author(s)
      Po-Min Chuang, Kiyoaki Shirai, Natthawut Kertkeidkachorn
    • Organizer
      The 16th International Conference on Agents and Artificial Intelligence
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research

URL: 

Published: 2023-04-13   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi