• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Research-status Report

Creating Spatiotemporal Rubbing-database for Discovering Potential knowledge

Research Project

Project/Area Number 18K18337
Research InstitutionRitsumeikan University

Principal Investigator

孟 林  立命館大学, 理工学部, 講師 (60615938)

Project Period (FY) 2018-04-01 – 2021-03-31
Keywords拓本時空間データベース / 深層学習
Outline of Annual Research Achievements

本研究では、漢字を中心とした日本と中国の重要な古資料文献である拓本の多書体文字を、深層学習を用いて認識し、さらに、時空間情報を含むデータベースを作成して、それらを地図上に可視化することで有用な情報を抽出し、歴史の整理、気候変動、自然災害の予測対応等の研究に貢献することを目的とする。
現在、拓本内の多書体文字を認識するためのデータ増強、データセット作成手法、深層学習による認識と認識率の向上手法を提案し、実験を行ってきた。また、拓本の時空間情報をキーワード毎に整理して時空間データベースを作成し、それらを地図上に可視化して潜在知識を抽出する、拓本潜在知識発見システムを設計している。
拓本内の多書体文字の認識では、集めてきた拓本内の文字に対して、ノイズの除去、切り取り、輝度値変更の処理を行い、訓練データを増強し、100文字種5267331枚の画像を生成した。また、AlexnetとGoogLenetを用いて学習、認識を行い、61文字種のときGoogLenetで認識率96%、100文字種のときAlexnetで認識率92%を達成することを示した。さらに、AlexnetのDropoutの値を変更することで、認識率を92%から93.5%まで向上することを示した。
時空間データベースの作成と可視化では、拓本の時空間情報を整理して、時空間管理番号表を作成し、さらに、キーワード毎に拓本の情報を管理番号でまとめた、キーワード管理番号表を12文字分作成した。そして、それら2つのリストを用いて、時空間データベースを作成するプログラムと、時空間データベースから地図上に可視化するのに必要な情報を整理するシステムを実現した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

新たに発見した問題点
(1)拓本の欠損により、深層学習においても認識できない部分が存在している。
(2)歴史の原因により、拓本の出土地域と出土時間を記載されていない拓本が存在していることが分かった。それにより、当該する拓本情報を時間空間データベースに記録できない問題が生じる。
(3)研究推進することにより、拓本のみならず、本研究は、日本の古典籍の認識と整理にも使えると発見した。

Strategy for Future Research Activity

今年度の研究計画は、当初設定されたプロセスの進行と、新たに発見された問題点の解決の二つで構成されている。
【設定されたプロセス】
(1)深層学習と画像処理を用いて、拓本文字認識精度の向上を目指す。
(2)時空間データベースを完成する。(3)画像処理を用いてキーワードの可視化を実現する。
【新たに発見された問題点】
(1)拓本欠損問題について:拓本の欠損による認識できない拓本文に対して、統計的な手法を用いて、認識できた部分を整理し、認識できない拓本文の推測を行う。(2)拓本情報の不足問題について:インタネットでの検索、海外の研究者を含めた専門に聞く、そして、認識できた拓本の文章から、必要な拓本に関する情報を分析し、取得する。(3)日本古典籍への応用について、本研究は日本古典籍への応用ができると判明し、今後本システムを用いて、日本古典籍のキーワードに関する時間空間データベースを作成し、日本古典籍から潜在的な知識の抽出に貢献したい。

  • Research Products

    (8 results)

All 2019 2018

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (7 results) (of which Int'l Joint Research: 3 results,  Invited: 2 results)

  • [Journal Article] ハフ空間での依存マトリクスを用いた主線分抽出による甲骨文字認識2018

    • Author(s)
      孟 林,辻 翼,泉 知論, 落合 淳思,山崎 勝弘
    • Journal Title

      画像電子学会誌

      Volume: 47 Pages: 457-466

    • Peer Reviewed
  • [Presentation] 画像処理と深層学習を用いた古代文献の解読と整理2019

    • Author(s)
      孟 林
    • Organizer
      電気学会、制御研究会
  • [Presentation] 甲骨拓本からの自動文字抽出手法と支援環境2019

    • Author(s)
      渡邉 清威, 孟 林, 泉 知論
    • Organizer
      画像電子学会 第288回研究会
  • [Presentation] Unlocking Potential Knowledge Hidden in Rubbing:Multi-style Character Recognition using Deep Learning and Spatiotemporal Rubbing Database Creation2018

    • Author(s)
      Lin Meng, Masahiro Kishi, Kana Nogami, Michiko Nabeya and Katsuhiro Yamazaki
    • Organizer
      EuroMed2018 7th International Conference on DIGITAL HERITAGE
    • Int'l Joint Research
  • [Presentation] Ancient Asian Character Recognition for Literature Preservation and Understanding2018

    • Author(s)
      Lin Meng, C.V Aravinda, K R Uday Kumar Reddy, Tomonori Izumi and Katsuhiro Yamazaki
    • Organizer
      EuroMed2018 7th International Conference on DIGITAL HERITAGE
    • Int'l Joint Research
  • [Presentation] Recognition of Oracle Bone Inscriptions Using Deep Learning based on Data Augmentation2018

    • Author(s)
      Lin Meng, Naoki Kamitoku and Katsuhiro Yamazaki
    • Organizer
      2018 IEEE International Conference on Metrology for Archaeology and Cultural Heritage (IEEE MetroArchaeo 2018)
    • Int'l Joint Research
  • [Presentation] Artificial Intelligence for Computer Science and Image Recognition2018

    • Author(s)
      Lin Meng
    • Organizer
      ICETE-2018 (International Conference on Emerging Trends in Engineering)
    • Invited
  • [Presentation] Oracle Bone Inscriptions Recognition by Image Processing and Deep Learning2018

    • Author(s)
      Lin Meng
    • Organizer
      the 1st Int. Symp. On Oracle Bone Inscriptions Information Processing
    • Invited

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi