2023 Fiscal Year Annual Research Report
Spot context collection through multi-modal sensing and mobile federated learning
| Project/Area Number |
21H03431
|
|---|
| Research Institution | Nara Institute of Science and Technology |
|---|
Principal Investigator |
安本 慶一 奈良先端科学技術大学院大学, 先端科学技術研究科, 教授 (40273396)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
諏訪 博彦 奈良先端科学技術大学院大学, 先端科学技術研究科, 准教授 (70447580)
水本 旭洋 大阪大学, 大学院情報科学研究科, 特任准教授(常勤) (80780006)
松田 裕貴 奈良先端科学技術大学院大学, 先端科学技術研究科, 客員准教授 (90809708)
|
|---|
| Project Period (FY) |
2021-04-01 – 2024-03-31
|
| Keywords | 場所のコンテキスト推定 / マルチモーダルセンシング / モバイル連合学習 / 参加型センシング / オブジェクト認識 |
|---|
| Outline of Annual Research Achievements |
従来のユーザ参加型センシングでは、収集したデータを有用な情報に変換するには、サーバ上での蓄積と集中処理が不可欠であった（課題1）。さらに、モデルの学習には、位置情報や写真などプライバシーを含む個人データの提供が必要であった（課題2）。また、参加型センシングを観光ナビゲーションサービスに応用するには、観光スポットごとの最新かつ詳細なハイレベルコンテキストを継続的に取得・共有する仕組みが求められる（課題3）。本研究では、ユーザのスマートフォンなどで得られるセンサ値や写真から、混雑状況や風景、人の感情といった文脈情報をオンデバイスで学習し、認識結果とモデルパラメータのみを他端末と連合学習によって共有することで、プライバシーを保ちながらこれらの課題を解決することを目指す。目的達成のため、WP1-WP6の研究開発項目を設定し、2023-2024年度はWP3〜WP6に注力した。WP3では観光地の現況を表す画像生成技術を開発し、WP4で連合学習機構、WP5で統合ソフトウェア、WP6でアプリを実装・評価した。
|
| Research Progress Status |
令和5年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
令和5年度が最終年度であるため、記入しない。
|
