• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2020 年度 実績報告書

深層学習を用いた音声、表情、動作解析による抑うつ状態自己診断システムの開発

研究課題

研究課題/領域番号 20J13009
研究機関立命館大学

研究代表者

LIU JIAQING  立命館大学, 情報理工学研究科, 特別研究員(DC2) (20948343)

研究期間 (年度) 2020-04-24 – 2021-03-31
キーワードうつ病認識 / マルチモダリティAI
研究実績の概要

ストレスが多い現代社会では"うつ病”が大きな問題である.うつ病に対する早期発見と適切な治療により,大部分の改善が期待できることから,人工知能を用いた音声や表情などの特徴からうつ状態を検出する手法が期待されている. 本研究では,被験者の音声と表情動画像を用いたうつ状態検出法(Multi-modal Adaptive Fusion Transformer Network)を提案した.主な貢献点は, ①適応的マルチモダリティ特徴融合法を提案し,うつ状態検出に最も有効なモダリティ特徴を強調することによって高い検出精度の実現,②再帰型ニューラルネットワーク(RNN)の代わりにTransformerを用いたLong-range の時系列特徴を抽出による,検出精度の向上,③マルチタスク学習による検出精度の向上,である.提案法はstate-of-the-art精度を達成した.それらの成果は,国際学術誌IEEE Sensors Journal,IEEE Transactions on Instrumentation and Measurement,Sensors,および国際学会ACCVなどで発表した.

現在までの達成度 (段落)

令和2年度が最終年度であるため、記入しない。

今後の研究の推進方策

令和2年度が最終年度であるため、記入しない。

  • 研究成果

    (15件)

すべて 2022 2021 2020 その他

すべて 国際共同研究 (1件) 雑誌論文 (4件) (うち国際共著 4件、 査読あり 4件、 オープンアクセス 2件) 学会発表 (9件) (うち国際学会 3件、 招待講演 1件) 図書 (1件)

  • [国際共同研究] 浙江大学/蘇州大学(中国)

    • 国名
      中国
    • 外国機関名
      浙江大学/蘇州大学
  • [雑誌論文] CoSTHR: A Heart Rate Estimating Network with Adaptive Color Space Transformation2022

    • 著者名/発表者名
      Qiu Zhaolin、Liu Jiaqing、Sun Hao、Lin Lanfen、Chen Yen-Wei
    • 雑誌名

      IEEE Transactions on Instrumentation and Measurement

      巻: 1 ページ: 1~1

    • DOI

      10.1109/TIM.2022.3170976

    • 査読あり / 国際共著
  • [雑誌論文] タッチベースインタラクティブCOVID-19診断支援可視化システム2022

    • 著者名/発表者名
      劉 家慶、黄 慧敏、王 芳、原 野、健山 智子、岩本 祐太郎、林 蘭芬、陳 延偉
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J105-D ページ: 89~96

    • DOI

      10.14923/transinfj.2021SKP0007

    • 査読あり / 国際共著
  • [雑誌論文] Multi-Modal Adaptive Fusion Transformer Network for the Estimation of Depression Level2021

    • 著者名/発表者名
      Sun Hao、Liu Jiaqing、Chai Shurong、Qiu Zhaolin、Lin Lanfen、Huang Xinyin、Chen Yenwei
    • 雑誌名

      Sensors

      巻: 21 ページ: 4764~4764

    • DOI

      10.3390/s21144764

    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Single Image Depth Map Estimation for Improving Posture Recognition2021

    • 著者名/発表者名
      Liu Jiaqing、Tsujinaga Seiju、Chai Shurong、Sun Hao、Tateyama Tomoko、Iwamoto Yutaro、Huang Xinyin、Lin Lanfen、Chen Yen-Wei
    • 雑誌名

      IEEE Sensors Journal

      巻: 21 ページ: 26997~27004

    • DOI

      10.1109/jsen.2021.3122128

    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] An Improved Conditional Generative Adversarial Network for Translation of Depth Image from Color Image and Accurate Hand Gesture Recognition2021

    • 著者名/発表者名
      Shurong Chai, Jiaqing Liu, Tomoko Tateyama, Yutaro Iwamoto, Yen-Wei Chen
    • 学会等名
      2021 IEEE 10th Global Conference on Consumer Electronics (GCCE 2021)
    • 国際学会
  • [学会発表] Transformerエンコーダを用いたうつ状態の重症度の解析とマルチモーダルアダプティブアレーの融合に関する検討2021

    • 著者名/発表者名
      劉家慶 , 柴 樹榕 , 孫 浩 , 黄辛隠 , 林 蘭芬 , 健山智子 , 岩本祐太郎 , 陳延偉
    • 学会等名
      電子情報通信学会医用画像研究会MI2021-17
  • [学会発表] Graph Convolutional Networksを用いた人体の3次元ポーズ認識2021

    • 著者名/発表者名
      木下将児 , 劉家慶 , 健山智子 , 岩本祐太郎 , 陳延偉
    • 学会等名
      映像情報メディア学会ヒューマンインフォメーション研究会
  • [学会発表] CNNとTransformerエンコーダを用いたうつ状態の検出2021

    • 著者名/発表者名
      劉家慶 , 黄越 , 黄辛隠 , 健山智子 , 岩本祐太郎 , 陳延偉
    • 学会等名
      電子情報通信学会パターン認識メディア理解研究会
  • [学会発表] G-GCSN: Global Graph Convolution Shrinkage Network for Emotion Perception from Gait2020

    • 著者名/発表者名
      Yuan Zhuang , Lanfen Lin , Ruofeng Tong , Jiaqing Liu , Yutaro Iwamot , Yen-Wei Chen
    • 学会等名
      Asian Conference on Computer Vision (ACCV), 2020
    • 国際学会
  • [学会発表] センチメントテキスト朗読時の表情顔を用いたうつ状態の検出2020

    • 著者名/発表者名
      劉家慶 , 黄越 , 黄辛隠 , 健山智子 , 岩本祐太郎 , 陳延偉
    • 学会等名
      電子情報通信学会パターン認識メディア理解研究会
  • [学会発表] A Preliminary Study of Kinect-Based Real-Time Hand Gesture Interaction Systems for Touchless Visualizations of Hepatic Structures in Surgery2020

    • 著者名/発表者名
      劉家慶
    • 学会等名
      医用画像情報学令和2年度秋季(第188回)大会(金森奨励賞の受賞記念講演)
    • 招待講演
  • [学会発表] タッチベースインタラクティブCOVID-19のセグメンテーション、定量評価 および可視化システム2020

    • 著者名/発表者名
      劉家慶 , 健山智子 , 岩本祐太郎 , 陳延偉
    • 学会等名
      電子情報通信学会医用画像研究会
  • [学会発表] Dynamic Facial Features in Positive-Emotional Speech for Identification of Depressive Tendencies2020

    • 著者名/発表者名
      Jia-Qing Liu , Yue Huang , Xin-Yin Huang , Xiao-Tong Xia , Xi-Xi Niu , Lanfen Lin , Yen-Wei Chen
    • 学会等名
      Innovation in Medicine and Healthcare 2020
    • 国際学会
  • [図書] Handbook of Aritificial Intelligence in Healthcare2021

    • 著者名/発表者名
      Jiaqing Liu, Yue Huang, Shurong Chai, Hao Sun, Xinyin Huang, Lanfen Lin ,Yen-Wei Chen
    • 総ページ数
      19
    • 出版者
      Springer
    • ISBN
      978-3-030-79160-5

URL: 

公開日: 2022-12-28  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi