• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

マルチモーダルセンシングによる頷き行動のモデル化と知識コンテンツ獲得への応用

Research Project

Project/Area Number 16700094
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeSingle-year Grants
Research Field Media informatics/Database
Research InstitutionShizuoka University

Principal Investigator

坂根 裕  静岡大学, 情報学部, 助手 (40345806)

Project Period (FY) 2004 – 2005
Project Status Completed (Fiscal Year 2005)
Budget Amount *help
¥3,600,000 (Direct Cost: ¥3,600,000)
Fiscal Year 2005: ¥1,900,000 (Direct Cost: ¥1,900,000)
Fiscal Year 2004: ¥1,700,000 (Direct Cost: ¥1,700,000)
Keywords意図的・非意図的 / 映像コンテンツ / メタデータ / 運転環境 / 住環境 / 講演環境 / 幼児教育 / マルチモーダルセンシング / コミュニケーション / うなずき / センシング / ヘッドセット / コンテンツ
Research Abstract

本研究ではコミュニケーションや学習といったアクティビティを,映像コンテンツとしてアーカイブ化する際に,登場する人物の頷きやジェスチャーといった意図的あるいは非意図的な行為をマルチモーダルセンシングにより抽出し,コンテンツに知識情報をメタデータとして付与することで,深みのある知識映像コンテンツを作り出すことを目的として推進してきた.本年度は,これまでに蓄積したセンシングおよびコンテシツ化技術を活用し下記の実務応用に取り組んだ.
1.車の運転における運転者および同乗者の反応から状況をコンテンツ化
運転者の覗き込み行為から必要なコンテンツを生成する技術として応用
2.住環境における家電機器制御における住人の反応と状況をコンテンツ化
住人の動きから,状況判断のためのコンテンツ生成技術として応用
3.講演における会場の状況と講演者の反応をコンテンツ化
講演者の状況から,情報保障を行うためのコンテンツ生成技術として応用
4.幼児教室における幼児の行動と反応をゴンテンツ化
幼児の行動から幼児の成長や概念獲得を獲得するための観測用コンテンツ生成応用
本年度は「頷き」行為だけにとどまらず広くアクティビティにおける状況と人間の行為の関係について検討しながら応用技術の開発・実験を行ってきた.単純に記録するというコンテンツ化技術は多く研究・開発されているが,映像コンテンツに深みの方向を与える知識をリアルタイムに抽出しながら映像に付与し,単純に見るだけでは不可能な理解や解釈を与える有効な手段となり得る見通しを得た.

Report

(2 results)
  • 2005 Annual Research Report
  • 2004 Annual Research Report
  • Research Products

    (12 results)

All 2006 2005 2004

All Journal Article (12 results)

  • [Journal Article] A Unique Way of Personalized and Situational Supports for Universal Access of Home Appliance Network2006

    • Author(s)
      T.Haraikawa, S.Nakagawa, Y.Une, Y.Sakane, Y.Takebayashi
    • Journal Title

      Digest of Technical Papers, IEEE International Conference on Consumer Electronics

      Pages: 59-60

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 環境に応じた複数の運用形態を実現する手頃な情報保障ツールの提案2006

    • Author(s)
      坂根裕, 采泰臣, 山本剛, 祓川友宏, 竹林洋一
    • Journal Title

      情報処理学会研究報告 2006-UBI-10

      Pages: 1-5

    • NAID

      110004710091

    • Related Report
      2005 Annual Research Report
  • [Journal Article] A Stream Distribution System for Multimodal Knowledge Media using Dynamic Structuring Function2006

    • Author(s)
      D.Aoshima, H.Kato, Y.Sakane, Y.Takebayashi
    • Journal Title

      International Workshop on Advanced Image Technology 2006

      Pages: 148-153

    • NAID

      110004078894

    • Related Report
      2005 Annual Research Report
  • [Journal Article] A Cruising-Assist System Based on Multimodal Visual Interfaces for Enhancement of Surrounding Environments2006

    • Author(s)
      Y.Sakane, Y.Arai, T.Okino, Y.Kuroki, T.Haraikawa, Y.Takebayashi
    • Journal Title

      International Workshop on Advanced Image Technology 2006

      Pages: 465-469

    • NAID

      110004082612

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 手頃な情報保障:情報系研究者にできること2006

    • Author(s)
      坂根裕
    • Journal Title

      情報処理学会研究グループ研究報告 2006-WSS-3P

      Pages: 7-10

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 幼児行動コーパスの構築に関する検討2005

    • Author(s)
      大竹康太, 大谷尚史, 川口紗季, 坂根裕, 桐山伸也, 竹林洋一
    • Journal Title

      第4回情報科学技術フォーラム FIT2005 第2分冊

      Pages: 129-130

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 親子のコミュニケーションを促進する幼児教育の一検討2005

    • Author(s)
      川口紗季, 坂根信一, 坂根裕, 竹林洋一
    • Journal Title

      情報処理学会第67回全国大会

    • NAID

      170000170894

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Multimodal Knowledge for Designing New Sound Environments2004

    • Author(s)
      G.Yamamoto, K.Shiraki, M.Takahata, Y.Sakane, Y.Takebayashi
    • Journal Title

      Workshop on Mobile HCI and Sound

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Wearable Intelligence for Musical Performance and Handwork2004

    • Author(s)
      N.Otani, G.Yamamoto, Y.Sakane, Y.Takebayashi
    • Journal Title

      Workshop on Mobile HCI and Sound

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Sound Feedback for Powerful Karate Training2004

    • Author(s)
      M.Takahata, K.Shiraki, Y.Sakane, Y.Takebayashi
    • Journal Title

      International Conference on New Interfaces for Musical Expression

      Pages: 13-18

    • Related Report
      2004 Annual Research Report
  • [Journal Article] A Design for the Ubiquitous Karate School for Learning Mind and Body Interaction2004

    • Author(s)
      Y.Sakane, M.Takahata, N.Otani, Y.Kuroki, Y.Takebayashi
    • Journal Title

      Pervasive 2004, Advances in Pervasive Computing

      Pages: 345-350

    • Related Report
      2004 Annual Research Report
  • [Journal Article] A Mountaineering Supporting System2004

    • Author(s)
      Y.Kuroki, S.Yoshitaki, Y.Sakane, Y.Takebayashi
    • Journal Title

      Pervasive 2004, Advances in Pervasive Computing

      Pages: 297-301

    • Related Report
      2004 Annual Research Report

URL: 

Published: 2004-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi