• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

映像による個人行動記録と大規模データの自然言語処理による日常生活に関する知識獲得

Research Project

Project/Area Number 16650025
Research Category

Grant-in-Aid for Exploratory Research

Allocation TypeSingle-year Grants
Research Field Intelligent informatics
Research InstitutionKyoto University

Principal Investigator

中村 裕一  京都大学, 学術情報メディアセンター, 教授 (40227947)

Co-Investigator(Kenkyū-buntansha) 黒橋 禎夫  東京大学, 情報理工学系研究科, 助教授 (50263108)
Project Period (FY) 2004 – 2005
Project Status Completed (Fiscal Year 2005)
Budget Amount *help
¥3,200,000 (Direct Cost: ¥3,200,000)
Fiscal Year 2005: ¥1,600,000 (Direct Cost: ¥1,600,000)
Fiscal Year 2004: ¥1,600,000 (Direct Cost: ¥1,600,000)
Keywords体験記録 / 映像検索 / 記憶補助 / 画像と言語の統合 / 遠隔コミュニケーション / ウェアラブルコンピュータ / 映像インデキシング / 映像の構造化
Research Abstract

平成17年度は以下のような研究を行い,個人行動記録の蓄積・検索・コーパスとしての高次利用に関する新しい手法を提案し,その有効性を確認しつつある.
(1)個人行動記録映像の蓄積とそのシステム化
行動環境,行動のストーリーなどを具体的に設定し,様々なデータを取得した.実際に集めたのは複数人で100時間超のデータとした.そのために,環境カメラを複数箇所に設置し,室内のどの位置に人物がいても周辺の映像が個人視点映像と自動的に同期して記録されるようにシステムを構築した.また,屋外や環境カメラがない屋内でもその個人視点映像を有効に利用できるように,GPSとジャイロを用いた位置記録システムの併用を試み,部屋の特定などの目的で用いることが可能であることを確認した.
(2)個人行動記録の近接性による構造化と連想検索
個人行動記録の構造化手法として,自然言語で用いられている近接性の概念を採り入れ,各々の記録断片(1フレーム〜数秒程度の短い映像断片)の間の関係を様々な近接性で記述する枠組みを提案した.また,それらの近接性を画像・音声・時刻・位置・その他のセンサ情報から検出する方法について考案し,一部分を実際にプログラムとして実装した.検索実験を行うことにより,その有効性を確認した.
(3)映像と言語の統合的コーパス化
以上の道具立てを用いて,個人行動記録に関する映像と自然言語のラベル付け,それによるコーパス化やデータマイニングへの入力が検討できる段階になった.直接的な画像処理による特徴抽出と近接性による検索を用いて人間の類似行動をまとめることによって多くのデータ断片が自動的に関連づけられること,また,人手で関連づける場合にもその労力が大幅に軽減されることが確認できた.
現在,引き続きデータマイニングとそれによるシンボルグラウンディングに関する研究を行っている.

Report

(2 results)
  • 2005 Annual Research Report
  • 2004 Annual Research Report
  • Research Products

    (12 results)

All 2006 2005 2004

All Journal Article (12 results)

  • [Journal Article] 人工エージェントのノンバーバル表現とメタ表示の関係2006

    • Author(s)
      尾関基行, 青山秀紀, 中村裕一
    • Journal Title

      第二回デジタルコンテンツシンポジウム (発表予定)

    • Related Report
      2005 Annual Research Report
  • [Journal Article] Retrieval of Personal Experience Records Using Relevance Feedback with a Structuring Filter2005

    • Author(s)
      T.Koizumi, Y.Kameda, Y.Nakamura
    • Journal Title

      European Workshop on the Integration of Knowledge, Semantic and Digital Media Technologies

    • NAID

      10016576238

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 個人行動記録の意味的構造を用いた効率的検索システム2005

    • Author(s)
      小泉敬寛, 亀田能成, 中村裕一
    • Journal Title

      画像の認識理解シンポジウム(MIRU2005)

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 個人行動記録の構造化類似検索手法2005

    • Author(s)
      小泉敬寛, 亀田能成, 中村裕一
    • Journal Title

      信学技報 Vol.PRMU2005-34

      Pages: 1-6

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 会話シーンの複数視点からの自動撮影・編集2005

    • Author(s)
      西崎隆志, 尾形涼, 中村裕一, 亀田能成, 大田友一
    • Journal Title

      第一回デジタルコンテンツシンポジウム S1-6

    • Related Report
      2005 Annual Research Report
  • [Journal Article] Interactive Media for Gently Giving Instructions --- Basic idea of watching and teaching users2005

    • Author(s)
      T.Kosaka, Y.Nakamura, Y.Ohta, Y.Kameda
    • Journal Title

      Proc.AISB Symposium on Conversational Informatics for Supporting Social Intelligence & Interaction

      Pages: 97-102

    • Related Report
      2005 Annual Research Report
  • [Journal Article] Interactive Media for Gently Giving Instructions-Basic idea of watching and teaching users2005

    • Author(s)
      T.Kosaka, Y.Nakamura, Y.Ohta, Y.Kameda
    • Journal Title

      Proc.AISB Symposium on Conversational Informatics for Supporting Social Intelligence & Interaction (掲載予定)

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Object Tracking and Object Change Detection in Desktop Manipulation for Video-based Interactive Manuals2004

    • Author(s)
      Y.Tsubuku, Y.Nakamura, Y.Ohta
    • Journal Title

      Pacific-Rim Conference on Multimedia

      Pages: 104-112

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Video-Based Interactive Media for Gently Giving Instructions2004

    • Author(s)
      T.Kosaka, Y.Nakamura, Y.Kameda, Y.Ohta
    • Journal Title

      Proc.8th Int'l Conference on Khowledge-Based Intelligent Information & Engineering Systems

      Pages: 411-418

    • Related Report
      2004 Annual Research Report
  • [Journal Article] 映像インデキシングのための注目領域検出と言語との対応付けの検討2004

    • Author(s)
      山本治由, 中村裕一, 大田友一
    • Journal Title

      情報科学技術フォーラム(FIT2004)

    • Related Report
      2004 Annual Research Report
  • [Journal Article] Relevance Feedbackを用いた個人行動記録の検索2004

    • Author(s)
      小泉敬寛, 中村裕一, 大田友一
    • Journal Title

      情報科学技術フォーラム(FIT2004)

    • Related Report
      2004 Annual Research Report
  • [Journal Article] 会話シーンを対象とした映像コンテンツの取得と編集2004

    • Author(s)
      西崎隆志, 尾形涼, 中村裕一, 大田友一
    • Journal Title

      画像の認識・理解シンポジウム(MIRU2004)

      Pages: 451-456

    • Related Report
      2004 Annual Research Report

URL: 

Published: 2004-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi