• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Research-status Report

機械学習の汎化性能と信頼性の向上に関する研究

Research Project

Project/Area Number 22K17946
Research InstitutionThe University of Tokyo

Principal Investigator

石田 隆  東京大学, 大学院新領域創成科学研究科, 講師 (80888462)

Project Period (FY) 2022-04-01 – 2027-03-31
Keywords機械学習 / MU学習
Outline of Annual Research Achievements

本年度の研究では、少数データ環境下での機械学習の汎化性能と信頼性の向上を目指しました。具体的な研究活動として、機械学習の国際会議に参加するなど、関連する最新研究のサーベイを行いました。これらの活動を通して、知識蒸留や弱教師・強教師情報など、従来とは異なるデータからの学習方法や、性能向上のためのアイデアを得ることができ、その理論や実装についての研究を進めています。その一例として、Mediated uncoupled(MU)学習に関する研究に取り組みました。MU学習は、入力変数Xから出力変数Yを予測する通常の教師あり学習と同じ目標を持ちつつ、訓練データセットが(X,Y)の組み合わせサンプルを持たず、代わりに中間変数Uを介して独立に観察された(X, U)および(U, Y)のサンプルのみを有するという特性を持つような方法です。MU学習のフレームワークを提案し、Bregman divergenceを用いることで、様々なタスクに有用な広範な損失関数を統一的に扱うことを可能にしました。また、訓練モデルの予測の期待テスト損失を含む範囲を推定する方法も提案しています。理論的な分析に加え、人工データを用いた回帰実験およびベンチマークデータセットを用いた低品質画像分類実験でその有用性を確認しました。MU学習に関する研究論文は、Artificial Intelligence and Statistics 2023(AISTATS 2023)に採択されました。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

初年度は、MU学習に関する論文(AISTATS2023)に取り組み、また、複数の研究プロジェクト(未公表のため詳細を省略させていただきます)を進めることができました。そのため、進捗状況としましては、おおむね順調に進展していると考えています。

Strategy for Future Research Activity

令和5年度から令和8年度の残り4年間となりましたが、本研究課題の研究計画に対して、大きな変更点はありません。弱教師学習や強教師学習(ソフトラベル学習や知識蒸留)の研究などを通して、機械学習の汎化性能と信頼性をさらに向上させるための研究を進めて参ります。

  • Research Products

    (2 results)

All 2023

All Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (1 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Mediated Uncoupled Learning and Validation with Bregman Divergences: Loss Family with Maximal Generality2023

    • Author(s)
      Ikko Yamane, Yann Chevaleyre, Takashi Ishida, Florian Yger
    • Journal Title

      Proceedings of The 26th International Conference on Artificial Intelligence and Statistics

      Volume: 206 Pages: 4768-4801

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Mediated Uncoupled Learning and Validation with Bregman Divergences: Loss Family with Maximal Generality2023

    • Author(s)
      Ikko Yamane, Yann Chevaleyre, Takashi Ishida, Florian Yger
    • Organizer
      The 26th International Conference on Artificial Intelligence and Statistics (AISTATS 2023)
    • Int'l Joint Research

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi