• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

動画像のアピアランスモデルとその応用に関する研究

Research Project

Project/Area Number 16760293
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeSingle-year Grants
Research Field Communication/Network engineering
Research InstitutionThe University of Electro-Communications

Principal Investigator

長井 隆行  電気通信大学, 大学院電気通信学研究科, 助教授 (40303010)

Project Period (FY) 2004 – 2006
Project Status Completed (Fiscal Year 2006)
Budget Amount *help
¥3,500,000 (Direct Cost: ¥3,500,000)
Fiscal Year 2006: ¥900,000 (Direct Cost: ¥900,000)
Fiscal Year 2005: ¥1,100,000 (Direct Cost: ¥1,100,000)
Fiscal Year 2004: ¥1,500,000 (Direct Cost: ¥1,500,000)
Keywordsアピアランスモデル / 2次元隠れマルコフモデル / モデルベース符号化 / 顔アニメーション
Research Abstract

本研究は、動画像表現の新たな枠組みを開発することを目的としている。このためにまず、2次元隠れマルコフモデル(2DHMM)を用いた画像のアピアランスモデルを構築する。このような動画像のモデルを用いることで、オブジェクトの3次元形状の推定や、2次元画像からのパラメータの抽出といった困難な問題を回避することができると考えられる。一昨年度、昨年度はアピアランスモデルの基本的な枠組みを構築し、要素技術の開発を行った。また、昨年度は開発した要素技術の高精度化、応用について検討した。これを踏まえて本年度は、こうした技術の更なる応用について検討した。
1.アピアランスモデルの顔アニメーションヘの応用
提案法は、モデルベース符号化であるため、符号化と復号化で用いるモデルを変えることで面白い効果を生み出すことができると考えられる。そこで昨年度、アピアランスモデルの一つの応用として、ある人の顔を他人の顔に変換して顔アニメーションを行うことを検討した。実際にビデオカメラの前で表情を変えたり発話すると、画面上ではあたかも他の人が表情を変えたり、発話するような効果を得ることが可能となった。しかしこの段階では計算量が多く、リアルタイムでこれを行うことはできなかった。今年度は、アルゴリズムの高速化を行い、リアルタイムでの実現を可能とした。また、状態系列とモデルの符号化手法を併用することで、ネットワークを介した顔変換を実現することが可能となった。
2.ロボットによる概念の獲得におけるアピアランスモデルの利用
昨年度、アピアランスモデルを応用し、様々な物体の外見や文字を学習するシステムを検討した。また、実際にロボットに実装することで、見た物体を教師なしかつオンラインで学習することが可能となった。これは、アピアランスモデルの自動的なクラスタリングに基づいている。今年度はこれに基づき、さらに上位の概念を獲得する手法を検討し、ロボット上に実装することでその有効性を確かめた。具体的には、まず、視覚的情報をアピアランスモデルを用いて表現し、機能を対象物の変化ベクトルを用いて表現した。その上でこれらを確率モデルを用いて関連付けることで上位の物体概念を形成する計算モデルを提案し、実装した。これによりロボットが、はさみやカッターといった道具の概念を獲得し、その機能を予測することが可能となった。

Report

(3 results)
  • 2006 Annual Research Report
  • 2005 Annual Research Report
  • 2004 Annual Research Report
  • Research Products

    (13 results)

All 2007 2006 2005 2004

All Journal Article (12 results) Patent(Industrial Property Rights) (1 results)

  • [Journal Article] ベイジアンネットワークによる物体の概念モデル2007

    • Author(s)
      佐藤陽介, 長井隆行
    • Journal Title

      2007年電子情報通信学会総合大会講演論文集(情報・システム) D-12-77

      Pages: 193-193

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 物体のマルチモーダルカテゴリゼーション2006

    • Author(s)
      長井隆行, 岩橋直人
    • Journal Title

      情報科学技術レターズ2006 vol. 5

      Pages: 183-186

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 人間の行動モデルの生成と行動予測への応用2006

    • Author(s)
      安居健, 長井隆行
    • Journal Title

      第21回信号処理シンポジウム講演論文集 Ba-2(CD-ROM)

      Pages: 1-6

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 複数のステレオペアを用いた高解像度画像と高精度三次元情報の同時推定2006

    • Author(s)
      木村一人, 長井隆行, 永吉洋登, 酒匂裕
    • Journal Title

      第21回信号処理シンポジウム講演論文集 B8-3(CD-ROM)

      Pages: 1-6

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Object Categorization Using Multimodal Information2006

    • Author(s)
      Takayuki Nagai, Naoto Iwahashi
    • Journal Title

      Proc of IEEE Ten Region Conference (TENCON2006) C10.2 (CD-RON)

      Pages: 1-4

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Learning of Object Concept Through Function and Shape2006

    • Author(s)
      Yosuke Sato, Takayuki Nagai
    • Journal Title

      Proc of IEEE Ten Region Conference (TENCON2006) TEN-477(CD-RON)

      Pages: 1-4

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Blind Source Separation Using Correlation at Neighboring Frequencies2006

    • Author(s)
      Rintaro Sukegawa, Shinya Uchida, Takayuki Nagai, Masaaki Ikehara
    • Journal Title

      Proc of 2006 International Symposium on Intelligent Signal Processing and Communication Systems TAM1-2-1

      Pages: 451-454

    • Related Report
      2006 Annual Research Report
  • [Journal Article] マルチモーダル情報を用いた物体のカテゴリゼーション2006

    • Author(s)
      長井, 岩橋
    • Journal Title

      電子情報通信学会総合大会講演論文集 D-12-104(CD-ROM)(発表予定)

      Pages: 236-236

    • Related Report
      2005 Annual Research Report
  • [Journal Article] ユーザの簡易指定に基づく情景中の文字抽出と認識2005

    • Author(s)
      張, 長井, 榑松
    • Journal Title

      情報処理学会論文誌 vol.46

      Pages: 2556-2565

    • NAID

      110002769903

    • Related Report
      2005 Annual Research Report
  • [Journal Article] 事実と推論との関係を反映させた「しかし」による文の自動接続2005

    • Author(s)
      佐藤, 井原, 長井
    • Journal Title

      人工知能学会全国大会講演論文集 1E-3-04(CD-ROM)

      Pages: 1-2

    • NAID

      130004653924

    • Related Report
      2005 Annual Research Report
  • [Journal Article] Appearance Model-Based Face-to-Face Transform2005

    • Author(s)
      T.Nagai, T.Nguyen
    • Journal Title

      Proc.of IEEE Int.Conf on Acoust.Speech & Signal Proc. vol.5

      Pages: 749-752

    • Related Report
      2004 Annual Research Report
  • [Journal Article] 3次元情報復元のための知識と複数画像情報の確率的統合2004

    • Author(s)
      長井, 成瀬, 池原, T.Nguyen
    • Journal Title

      第19回信号処理シンポジウム講演論文集

      Pages: 1-6

    • Related Report
      2004 Annual Research Report
  • [Patent(Industrial Property Rights)] 物体認識システム、物体認識方法及び物体認識ロボット2006

    • Inventor(s)
      長井, 佐藤, 細井
    • Industrial Property Rights Holder
      長井, 佐藤, 細井
    • Industrial Property Number
      2006-308237
    • Filing Date
      2006-11-14
    • Related Report
      2006 Annual Research Report

URL: 

Published: 2004-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi