• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2014 Fiscal Year Annual Research Report

アクティビティ解析に基づくKnowledge Logの構築とその応用

Research Project

Project/Area Number 25240028
Research InstitutionOsaka Prefecture University

Principal Investigator

黄瀬 浩一  大阪府立大学, 工学(系)研究科(研究院), 教授 (80224939)

Co-Investigator(Kenkyū-buntansha) 岩村 雅一  大阪府立大学, 工学(系)研究科(研究院), 准教授 (80361129)
岩田 基  大阪府立大学, 工学(系)研究科(研究院), 助教 (70316008)
内海 ゆづ子  大阪府立大学, 工学(系)研究科(研究院), 助教 (80613489)
Project Period (FY) 2013-04-01 – 2017-03-31
Keywordsアクティビティ解析 / 行動認識 / アイトラッキング / 画像特徴 / 顔認識 / 漫画画像解析
Outline of Annual Research Achievements

以下の5点について成果を得た.
(1)顔画像認識技術の大規模化:局所特徴量の照合と投票という考えを用いて,顔画像認識の大規模化を達成した.
(2)文字認識技術の高度化,ならびに新しい文字認識技術の開発:文字の認識は本研究で重要な技術の一つである.ここでは,局所特徴に基づく文字認識技術の高精度化,ならびにcomputational photographyの技術を用いて得たdefocused patternに基づく文字認識の2つについて成果を得た.
(3)行動認識技術の高精度化:様々な手法やセンサーを用いて行動認識を高度化した.具体的には,画像処理を用いた文書タイプの識別,視線特徴と画像特徴をあわせた行動認識,cognitive activity認識のための視線特徴の利用ならびにEOG特徴の利用,Google Glassを用いた文書アノーテーション技術,行動認識技術ならびに行動記録技術,漫画を対象とした画像解析検索技術,視線特徴を用いた英語習熟度推定技術,fNIRSを用いた文書理解度推定技術などである.
(4)基礎技術の開発:近似逆最近傍探索技術の提案,ならびに,画像の種類によらない高速照合技術の開発を行った.後者については,早期認識,早期識別という概念を導入することにより達成した.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

研究の計画は,予想以上に進展した箇所と予定を下回っている箇所が存在する.両者を考え合わせると概ね順調と考える.以下で詳細を述べる.
(1) 予定を下回っている箇所:本年度の計画には,基礎的な知識記述に関する項目が存在している.要素となる技術は既に開発済みであるものの,具体的な知識記述というレベルには到達していない.また,それに基づくスマートフォンアプリケーションも未開発である.この点がやや遅れている箇所となっている.
(2) 予想以上に進展している箇所:認識検索技術については,JINS MEMEやGoogle Glassなどの新しいデバイスの導入,ならびに精度,高速性,大規模性を高めるための基礎技術の開発とその導入による各種認識技術の高度化を達成することができた.特に顔認識の大規模化,様々なセンサーや手法を用いた行動認識の高度化については,当初の予定を大幅に上回る成果である.

Strategy for Future Research Activity

今後の予定は以下の通りである.まず,本年度に達成できなかった知識記述を完成させる.さらに,認識技術を統合するとともに,スマートフォンなどの簡易デバイスを用いて動作可能なようにデモシステムを構築する.具体的にはスマートフォンを使った簡易インタフェースのもの,アイトラッカを含めた各種センサーを用いたフルスペックのものの2通りを作成する.スマートフォンのインタフェースとしては,スマートフォン内蔵のカメラを用いたアイトラッカの実現も試みる.フルスペックシステムについては,高価なデバイスだけではなく,JINS社から発売予定のEOGデバイス JINS MEME, Tobii社から発売されている廉価版アイトラッカ Tobii EyeXによる実現も試みる.スマートフォンによるシステムでは,必要に応じて,積極的にユーザに問い合わせるという方策をとる.一方,フルスペックシステムでは,可能な限り問い合わせない方針で臨む.いずれにせよ,システムはユーザからの"Guess what?",すなわち「なぜ見てる?」,「なぜボタンを押した?」などの問いに利用可能な情報を総動員して精度高く答えるこになる.

  • Research Products

    (17 results)

All 2015 2014

All Journal Article (4 results) (of which Peer Reviewed: 4 results,  Acknowledgement Compliant: 3 results) Presentation (12 results) Book (1 results)

  • [Journal Article] Data Embedding into Characters2015

    • Author(s)
      Koichi Kise, Shinichiro Omachi, Seiichi Uchida, Masakazu Iwamura and Marcus Liwicki
    • Journal Title

      Trans. IEICE

      Volume: E98-D Pages: 10-20

    • Peer Reviewed
  • [Journal Article] 局所特徴量と投票処理を用いた大規模データベースに対する高速顔認識2014

    • Author(s)
      内海 ゆづ子、坂野 悠司、前川 敬介、岩村 雅一、黄瀬 浩一
    • Journal Title

      電子情報通信学会論文誌D

      Volume: J97-D Pages: 1263-1272

    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] Recognition of Defocused Patterns2014

    • Author(s)
      Masakazu Iwamura, Masashi Imura, Shinsaku Hiura and Koichi Kise
    • Journal Title

      IPSJ Transactions on Computer Vision and Applicaitons

      Volume: 6 Pages: 48-52

    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 読書活動の自動的記録のための文書画像の識別2014

    • Author(s)
      志賀 優毅,内海 ゆづ子,岩村 雅一,カイ クンツェ,黄瀬 浩一
    • Journal Title

      電子情報通信学会論文誌D

      Volume: J97 Pages: 1733-1736

    • Peer Reviewed / Acknowledgement Compliant
  • [Presentation] The Augmented Narrative ― Toward Estimating Reader Engagement2015

    • Author(s)
      Kai Kunze, Susana Sanchez, Tilman Dingler, Olivier Augereau, Koichi Kise, Masahiko Inami, and Tsutomu Terada
    • Organizer
      Augmented Human
    • Place of Presentation
      Singapore
    • Year and Date
      2015-03-09 – 2015-03-11
  • [Presentation] Fast Instance Search Based on Approximate Bichromatic Reverse Nearest Neighbor Search2014

    • Author(s)
      Masakazu Iwamura, Nobuaki Matozaki and Koichi Kise
    • Organizer
      ACM International Conference on Multimedia
    • Place of Presentation
      Orland, USA
    • Year and Date
      2014-11-03 – 2014-11-07
  • [Presentation] Brain Teasers ― Toward Wearable Computing that Engages Our Mind2014

    • Author(s)
      Shoya Ishimaru, Kai Kunze, Koichi Kise, Masahiko Inami
    • Organizer
      2014 ACM Conference on pervasive and ubiquitous computing
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13 – 2014-09-17
  • [Presentation] Smarter Eyewear ― Using Commercial EOG Glasses for Activity Recognition2014

    • Author(s)
      Shoya Ishimaru, Kai Kunze, Katsuma Tanaka, Yuji Uema, Koichi Kise, Masahiko Inami
    • Organizer
      2014 ACM Conference on pervasive and ubiquitous computing
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13 – 2014-09-17
  • [Presentation] Memory Specs ― An Annotation System on Google Glass using Document Image Retrieval2014

    • Author(s)
      Katsuma Tanaka, Kai Kunze, Motoi Iwata, Koichi Kise
    • Organizer
      2014 ACM Conference on pervasive and ubiquitous computing
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13 – 2014-09-17
  • [Presentation] Shiny ― An Activity Logging Platform for Google Glass2014

    • Author(s)
      Shoya Ishimaru, Jens Weppner, Andreas Poxrucker, Paul Lukowicz, Kai Kunze, Koichi Kise
    • Organizer
      2014 ACM Conference on pervasive and ubiquitous computing
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13 – 2014-09-17
  • [Presentation] Implicit gaze based annotations to support second language learning2014

    • Author(s)
      Ayano Okoso, Kai Kunze, and Koichi Kise
    • Organizer
      2014 ACM Conference on pervasive and ubiquitous computing
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13 – 2014-09-17
  • [Presentation] Daily Activity Recognition Combining Gaze Motion and Visual Features2014

    • Author(s)
      Yuki Shiga,Takumi Toyama,Yuzuko Utsumi,Andreas Dengel,Koichi Kise
    • Organizer
      The 4th International Workshop on Pervasive Eye Tracking and Mobile Eye-based Interaction
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-13
  • [Presentation] Scalable Face Retrieval by Simple Classifiers and Voting Scheme2014

    • Author(s)
      Yuzuko Utsumi, Yuji Sakano, Keisuke Maekawa, Masakazu Iwamura, and Koichi Kise
    • Organizer
      1st International Workshop on Face and Facial Expression Recognition from Real World Videos
    • Place of Presentation
      Stockholm, Sweden
    • Year and Date
      2014-08-27
  • [Presentation] Fast and Optimal Binary Template Matching Application to Manga Copyright Protection2014

    • Author(s)
      Mathieu Delalandre, Motoi Iwata, and Koichi Kise
    • Organizer
      11th IAPR International Workshop on Document Analysis Systems
    • Place of Presentation
      Tours, France
    • Year and Date
      2014-04-07 – 2014-04-10
  • [Presentation] A study to achieve manga character retrieval method for manga images2014

    • Author(s)
      Motoi Iwata, Atsushi Ito, and Koichi Kise
    • Organizer
      11th IAPR International Workshop on Document Analysis Systems
    • Place of Presentation
      Tours, France
    • Year and Date
      2014-04-07 – 2014-04-10
  • [Presentation] Performance Improvement in Local Feature Based Camera-Captured Character Recognition2014

    • Author(s)
      Takahiro Matsuda, Masakazu Iwamura and Koichi Kise
    • Organizer
      11th IAPR International Workshop on Document Analysis Systems
    • Place of Presentation
      Tours, France
    • Year and Date
      2014-04-07 – 2014-04-10
  • [Book] Page Segmentation Techniques in Document Analysis, in Handbook of Document Image Processing and Recognition2014

    • Author(s)
      Koichi Kise
    • Total Pages
      41
    • Publisher
      Springer

URL: 

Published: 2016-06-01  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi