• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2015 Fiscal Year Research-status Report

テーラーメイド教育のための多様なセンサーを用いた学習支援

Research Project

Project/Area Number 15K12172
Research InstitutionOsaka Prefecture University

Principal Investigator

黄瀬 浩一  大阪府立大学, 工学(系)研究科(研究院), 教授 (80224939)

Project Period (FY) 2015-04-01 – 2017-03-31
Keywordsテーラメイド教育 / 視線解析 / アイトラッカ / 眼電位法 / TOEIC / オープンアイウェア
Outline of Annual Research Achievements

本年度は,まず様々なセンサの試験を行った.具体的には,既に保有している高価なアイトラッカ(SMI RED-250; サンプリング周波数250Hz),安価なアイトラッカ(Tobii EyeX; 30Hz),眼電位計測(EOG)眼鏡(JINS MEME)の3つについて試験を行った.その結果,高価なアイトラッカほどではないにせよ,安価なアイトラッカでもある程度,学習時の読書行動などを計測することが可能であると分かった.具体的には,読んだ単語数の計測などが可能である.また,EOG眼鏡については,連続値を出力可能なものと離散値のみが可能なものの2通りがある.連続値が出力可能なものについてはアイトラッカと同様,読んだ単語数を計測可能である.また離散値のものについては,読書行動を行っている時間区間を推定可能である.
次に,学習プロセスとの関連付けについて述べる.本研究では,上記のアイトラッカやEOG眼鏡を用いて学習成果を計測するための基礎的実験を行った.その結果,アイトラッカを用いると,TOEICの点数を精度良く(24点程度の絶対誤差で)推定可能であることがわかった.被験者はTOEICの長文問題を3問程度解けば良い.また,さらに理解が難しい英単語の推定にも使えることがわかった.一方,EOG眼鏡については,そのような高度な処理に用いることができず,読んだ量や時間に留まることもあきらかとなった.
最後に実証実験のための機関について述べる.ITを用いた教育に理解が深い品川女子学院を訪問し,協力への承諾を得た.この他,大阪府立大学でも実証実験を実施する予定である.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度はセンサの試験,学習プロセスとの関連付け,実証実験のための環境構築の3項目を実施することとしていたが,前述のとおり,これらすべてについて概ね計画した通りの成果を得て,順調に進展している.学習プロセスとの関連付けについては,特にTOEICスコアを非常に高い精度で,かつ少ない練習問題を解くだけで推定可能となった点は,予想を上回る成果であった.センサについては,まだ十分な結果は得られていないものの,廉価版装着型アイトラッカ(Pupil Labs社製)の試験も行っている.これらをもとに次年度の研究を行いたいと考えている.

Strategy for Future Research Activity

次年度は,これまでに培った技術を用いて,実際に様々なセンサを用いて学習プロセスを記録し,その解析結果から,教師や学生へのフィードバックをかけることを実現する.このためのデータの視覚化手法を確立すること,実際のフィールドで安定的にデータを取得可能なシステムを構築すること,さらには,大量のデータを有効に解析するための手法を考案することなどが主なテーマとなる.
なお,国際協力機関のドイツ人工知能研究センターでは,アイトラッカを用いて高校物理の能力を推定するシステムを構築している.また,フランスのラロッシェル大学では漫画を読む行為の記録と解析を行っている.これらの研究機関と協力して,さらなるデータの解析法やフィードバックの方法を考えていく予定である.

Causes of Carryover

差額の大半は物品費と人件費・謝金によるものである.物品については,既に保有していた多様なセンサを用いたので,購入せずに基礎データを取得することができた.人件費については,次年度の大規模実験に向けて予算を取り置いた形である.

Expenditure Plan for Carryover Budget

次年度には大規模実験を計画している.そのためには,今回,センサー試験に用いた多様なセンサーを,複数個,購入する必要がある.そのための費用として物品費の残りを消費する.人件費・謝金については,前述の通り,大規模実験の参加者への謝金として利用する.

  • Research Products

    (23 results)

All 2016 2015 Other

All Int'l Joint Research (2 results) Journal Article (1 results) (of which Acknowledgement Compliant: 1 results) Presentation (20 results) (of which Int'l Joint Research: 13 results,  Invited: 2 results)

  • [Int'l Joint Research] ドイツ人工知能研究センター(ドイツ)

    • Country Name
      GERMANY
    • Counterpart Institution
      ドイツ人工知能研究センター
  • [Int'l Joint Research] ラロッシェル大学(フランス)

    • Country Name
      FRANCE
    • Counterpart Institution
      ラロッシェル大学
  • [Journal Article] 文字・文書メディアの新しい利用基盤技術の開発への取組み2015

    • Author(s)
      黄瀬 浩一,大町 真一郎,内田 誠一,岩村 雅一
    • Journal Title

      電子情報通信学会誌

      Volume: 98 Pages: 311-327

    • DOI

      10.1016/j.cie.2010.08.007

    • Acknowledgement Compliant
  • [Presentation] 多様な文書にも対応可能なカメラベース文書アノーテーション付与・共有2016

    • Author(s)
      小熊 勇佑,黄瀬 浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      産業技術総合研究所副都心センター(東京都江東区)
    • Year and Date
      2016-03-24 – 2016-03-25
  • [Presentation] 視点情報を用いた主観的高難易度単語の推定2016

    • Author(s)
      大社 綾乃, 石丸 翔也, Olivier Augereau, 黄瀬 浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      産業技術総合研究所副都心センター(東京都江東区)
    • Year and Date
      2016-03-24 – 2016-03-25
  • [Presentation] 視点情報を用いた英語習熟度推定法の実験的検討2016

    • Author(s)
      藤好 宏樹,石丸 翔也,Olivier Augereau,黄瀬 浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      産業技術総合研究所副都心センター(東京都江東区)
    • Year and Date
      2016-03-24 – 2016-03-25
  • [Presentation] Media-Independent Stamp-Based Document Annotation Using DocumentImage Retrieval2015

    • Author(s)
      Yusuke Oguma and Koichi Kise
    • Organizer
      1st International Workshop on Visual Recognition and Retrieval for Mixed and Augmented Reality
    • Place of Presentation
      福岡国際会議場(福岡県福岡市)
    • Year and Date
      2015-10-03
    • Int'l Joint Research
  • [Presentation] MEME ― Eye Wear Computing to Explore Human Behavior2015

    • Author(s)
      Kai Kunze, Yuji Uema, Katsuma Tanaka, Shoya Ishimaru, Koichi Kise and Masahiko Inami
    • Organizer
      2015 ACM International Joint Conference on Pervasive and Ubiquitous Computing Adjunct Publication (UbiComp2015)
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-11
    • Int'l Joint Research
  • [Presentation] Extraction of Read Text for Automatic Video Annotation2015

    • Author(s)
      Mizuki Matsubara, Joachim Folz, Takumi Toyama, Marcus Liwicki, Andreas Dengel, Koichi Kise
    • Organizer
      2015 ACM International Symposium on Wearable Computers
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-11
    • Int'l Joint Research
  • [Presentation] 2nd Workshop on Ubiquitous Technologies to Augment the Human Mind: Towards the Knowledge Log2015

    • Author(s)
      Kai Kunze, Tilman Dingler, Niels Henze, Koichi Kise, Yoichi Sato
    • Organizer
      2nd Workshop on Ubiquitous Technologies to Augment the Human Mind: Towards the Knowledge Log
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-08
    • Int'l Joint Research / Invited
  • [Presentation] Quantifying Reading Habits; Counting How Many Words You Read2015

    • Author(s)
      Kai Kunze, Katsutoshi Masai, Masahiko Inami, Omer Sacakli, Marcus Liwicki, Andreas Dengel, Shoya Ishimaru, Koichi Kise
    • Organizer
      2015 ACM International Joint Conference on Pervasive and Ubiquitous Computing (UbiComp 2015)
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-08
    • Int'l Joint Research
  • [Presentation] Quantifying the Mental State on the Basis of Physical and Social Activities2015

    • Author(s)
      Shoya Ishimaru, Koichi Kise
    • Organizer
      2nd Workshop on Ubiquitous Technologies to Augment the Human Mind: Towards the Knowledge Log
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-08
    • Int'l Joint Research
  • [Presentation] Reading Similarity Measure Based on Comparison of Fixation Sequences2015

    • Author(s)
      Riki Kudo, Olivier Augereau, Takuto Rou, Koichi Kise
    • Organizer
      2nd Workshop on Ubiquitous Technologies to Augment the Human Mind: Towards the Knowledge Log
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-08
    • Int'l Joint Research
  • [Presentation] Eye gaze and text line matching for reading analysis2015

    • Author(s)
      Charles Lima Sanches, Olivier Augereau, Koichi Kise
    • Organizer
      2nd Workshop on Ubiquitous Technologies to Augment the Human Mind: Towards the Knowledge Log
    • Place of Presentation
      グランフロント大阪(大阪府大阪市北区)
    • Year and Date
      2015-09-07 – 2015-09-08
    • Int'l Joint Research
  • [Presentation] The Eye as the Window of the Language Ability: Estimation of English Skills by Analyzing Eye Movement While Reading Documents2015

    • Author(s)
      Kazuyo Yoshimura, Kai Kunze, Koichi Kise
    • Organizer
      13th International Conference on Document Analysis and Recognition (ICDAR2015)
    • Place of Presentation
      Prouve congress center, Nancy, France
    • Year and Date
      2015-08-23 – 2015-08-26
    • Int'l Joint Research
  • [Presentation] A proposal of a document image reading-life log based on document image retrieval and eyetracking2015

    • Author(s)
      Olivier Augereau, Koichi Kise, Kensuke Hoshika
    • Organizer
      13th International Conference on Document Analysis and Recognition (ICDAR2015)
    • Place of Presentation
      Prouve congress center, Nancy, France
    • Year and Date
      2015-08-23 – 2015-08-26
    • Int'l Joint Research
  • [Presentation] Document Analysis Meets Activity Recognition: A New Paradigm of Analyzing Documents in Combination With Users’ Reading Behavior2015

    • Author(s)
      Koichi Kise
    • Organizer
      13th International Conference on Document Analysis and Recognition (ICDAR2015)
    • Place of Presentation
      Prouve congress center, Nancy, France
    • Year and Date
      2015-08-23 – 2015-08-26
    • Int'l Joint Research / Invited
  • [Presentation] Estimating the number of read words with the Wordometer2015

    • Author(s)
      Olivier Augereau, Kai Kunze, Koichi Kise
    • Organizer
      画像の認識理解シンポジウム
    • Place of Presentation
      ホテル阪急エキスポパーク(大阪府吹田市)
    • Year and Date
      2015-07-27 – 2015-07-30
  • [Presentation] 英文問題解答時の視点情報を用いた英語能力推定法2015

    • Author(s)
      藤好 宏樹,吉村 和代,Kai Kunze,黄瀬 浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      三重大学(三重県津市)
    • Year and Date
      2015-05-24 – 2015-05-25
  • [Presentation] 学習補助のための視点情報に基づく文書アノテーション2015

    • Author(s)
      大社 綾乃, Kai Kunze, Olivier Augereau, 黄瀬 浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      三重大学(三重県津市)
    • Year and Date
      2015-05-24 – 2015-05-25
  • [Presentation] 視点情報に基づくリーディングライフログの取得とその視覚化2015

    • Author(s)
      星加 健介,藤好 宏樹,Olivier Augereau,黄瀬浩一
    • Organizer
      電子情報通信学会パターン認識メディア理解研究会
    • Place of Presentation
      三重大学(三重県津市)
    • Year and Date
      2015-05-24 – 2015-05-25
  • [Presentation] Towards Extraction of Subjective Reading Incomprehension: Analysis of Eye Gaze Features2015

    • Author(s)
      Ayano Okoso, Joachim Folz, Takumi Toyama, Marcus Liwicki, Kai Kunze, Koichi Kise
    • Organizer
      33rd Annual ACM Conference on Human Factors in Computing Systems
    • Place of Presentation
      COEX, Seoul, Korea
    • Year and Date
      2015-04-18 – 2015-04-23
    • Int'l Joint Research
  • [Presentation] Smart Eyewear for Interaction and Activity Recognition2015

    • Author(s)
      Shoya Ishimaru, Kai Kunze, Katsuma Tanaka, Yuji Uema, Koichi Kise and Masahiko Inami
    • Organizer
      33rd Annual ACM Conference on Human Factors in Computing Systems
    • Place of Presentation
      COEX, Seoul, Korea
    • Year and Date
      2015-04-18 – 2015-04-23
    • Int'l Joint Research

URL: 

Published: 2017-01-06  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi