深層学習と状態空間モデルの統合に基づく動画理解の課題に取り組みました。まず、深層マルコフモデルを導入し、カオスダイナミクスの予測、行動認識や動画生成のための深層モデルも開発した。次に、時系列と空間データを扱う2D畳み込みニューラルマルコフモデルを開発し、動画生成や行動認識の深層モデルを開発した。そして、動画生成の制御を可能にする深層モデルの構築に取り組み、ゼロショット画像生成を開発しました。さらに、動画像に含まれる静的特徴と動的特徴を分離する逐次変分オートエンコーダを開発した。以上の研究により、本研究のの有効性を実証した。
|