| 研究課題/領域番号 |
23K16924
|
|---|
| 研究種目 |
若手研究
|
| 配分区分 | 基金 |
|---|
| 審査区分 |
小区分61020:ヒューマンインタフェースおよびインタラクション関連
|
|---|
| 研究機関 | 北陸先端科学技術大学院大学 |
|---|
研究代表者 |
王 子洋 北陸先端科学技術大学院大学, 先端科学技術研究科, 助教 (60963593)
|
|---|
| 研究期間 (年度) |
2023-04-01 – 2026-03-31
|
| 研究課題ステータス |
交付 (2023年度)
|
| 配分額 *注記 |
4,680千円 (直接経費: 3,600千円、間接経費: 1,080千円)
2025年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2024年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2023年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
|
|---|
| キーワード | 共通基盤 / 遠隔コラボレーション / 遠隔作業支援 |
|---|
| 研究開始時の研究の概要 |
遠隔側の指示者（以下，指示者）がPC等を介して現地側の物体を参照し，現地側の作業者（以下，作業者）に目的の物体を操作させる遠隔作業支援において，それらの物体の参照表現（呼び方など）に対し，互いに同じ認識（共通基盤）を持たない場合，対話に齟齬が生じ，作業が円滑に進められない。複数の作業者がいる一対多遠隔作業支援では，共通基盤が不一致の問題が多発する。本研究では，指示者と作業者の共通基盤を解析できるAIモデルを開発する。そして，これらのAIモデルを用い，リアルタイムで指示者の指示から参照している対象物を推定して，作業者がより正しく速やかに対象物を把握できるように支援する遠隔作業支援システムを開発する。
|
| 研究実績の概要 |
遠隔側の指示者（以下，指示者）がPC等を介して現地側の物体を参照し，現地側の作業者（以下，作業者）に目的の物体を操作させる遠隔作業支援において，それらの物体の参照表現（呼び方など）に対し，互いに同じ認識（共通基盤）を持たない場合，対話に齟齬が生じ，作業が円滑に進められない。複数の作業者がいる一対多遠隔作業支援では，共通基盤が不一致の問題が多発する．本研究では，指示者と作業者の共通基盤を解析できるAIモデルを開発する．そして，これらのAIモデルを用い，リアルタイムで指示者の指示から参照している対象物を推定して，作業者がより正しく速やかに対象物を把握できるように支援する遠隔作業支援システムを開発する．
2023年度，共通基盤を解析するAIモデルを開発するため，一対多遠隔作業支援の実験を行った．遠隔参加者は現地参加者に指示し，現地参加者はタスクを行った．この実験では，指示者の視野映像や発話，ジェスチャなどの情報を，共通基盤の解析特徴の候補としてHMDとビデオカメラを用いて収集した．
|
| 現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
研究実施で設定した「課題① 共通基盤の解析の開発」のうち、2023年度までに①に関する「課題①－1【学習データの収集】」に取り組みを実施しています．そのうち，実験実施はすでに完了し，現在データの整理を行っている最中である．研究実施で設定されたスケジュールに沿ったものであり，プロジェクトは概ね順調に進捗していると判断される．
|
| 今後の研究の推進方策 |
引き続き、2024年度に「課題① 共通基盤の解析の開発」に実施していく。具体的に、「課題①－1【学習データの収集】」で収集したデータを分析し，機械学習モデルを開発する．一方，文献を調査し，融合手法を検討する．
|
