研究開始時の研究の概要 |
GPT-4やChatGPTなどは言語/画像データに基づく基盤モデルに限定される. 本提案はこれに続く基盤モデルとして,センサ信号のデータに基づく基盤モデルの構築, さらにこのセンサの基盤モデルを備えたマルチモダル基盤モデルの構築を提案する. この構築にはセンサ信号独自の困難さの克服を必要とする. センサ融合によるデータ結合技術, マルチモダル間の時系列データ技術などである. 完成すれば, 行動認識に対してラベルなしデータにより大幅な性能向上, 類似する後続タスク(リチウム蓄電池の残存容量予測, 屋内位置同定, メンタルステータス認識)での性能向上を期待し, 新たな種類のタスクも考案予定である.
|