• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Annual Research Report

Research on High Performance 3D Shape Retrieval under Diversified Queries including 2D Inputs and Semantic Attributes such as Holes and Concavities

Research Project

Project/Area Number 26280038
Research InstitutionToyohashi University of Technology

Principal Investigator

青野 雅樹  豊橋技術科学大学, 工学(系)研究科(研究院), 教授 (00372540)

Project Period (FY) 2014-04-01 – 2017-03-31
Keywords3D形状類似検索 / アノテーション / 注釈文 / シーングラフ / スケッチ検索 / 写真検索
Outline of Annual Research Achievements

【項目1:類似形状の多い3D形状データベースでの高精度3D検索手法の開発】 「穴」「凹凸」などの微細な形状の識別性能に優れた高精度の3D検索手法のために、H26年度にHSRD特徴量(HSRD=Hole and Surface Roughness Descriptor)を、H27年度に更に高精度なMRLBP (Multi-Resolution Local Binary Pattern)特徴量を開発した。H28年には、LSTMとCNNというボクセルベースの深層学習に基づく特徴量を開発し、学会で発表することができた。
【項目2:2Dからの高精度3D検索手法の開発】 3Dモデルの形状類似検索を行うために、クエリ(検索質問)として手元に3Dモデルが必須であることは、ユーザの負担が大きい。このため2D入力で3Dを検索できることは、とても有用である。H27年度は、スマートフォンやデジカメ等で簡単に撮影できる2D写真から、被写体に類似する3Dモデルの形状類似検索に関する新手法を開発した。この新手法では、2D写真内の被写体データをShadingデータとReflectanceデータに分離することで達成した技術である。この技術は、国際会議で採択され、成果の発表を行った。H28年度は2Dスケッチからの高精度な3D検索技術を開発し、特許出願をした。
【項目3:2D画像への意味付与手法の開発】 多様な3D検索手法開発のために、2Dの画像自体への意味付与技術を開発することが重要である。H27年度は、画像に対して意味のあるラベルとして、英語の注釈文を自動付与する技術開発に挑戦し、深層学習を使って注釈を付与する物体の自動に認識技術を開発し、国内学会で発表した。H28年には、意味付与としてシーングラフ表現に挑戦し、画像からシーングラフを自動生成する技術を開発した。

Research Progress Status

28年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

28年度が最終年度であるため、記入しない。

Causes of Carryover

28年度が最終年度であるため、記入しない。

Expenditure Plan for Carryover Budget

28年度が最終年度であるため、記入しない。

  • Research Products

    (23 results)

All 2017 2016

All Journal Article (3 results) (of which Int'l Joint Research: 3 results,  Peer Reviewed: 3 results,  Acknowledgement Compliant: 2 results) Presentation (18 results) (of which Int'l Joint Research: 9 results) Patent(Industrial Property Rights) (2 results)

  • [Journal Article] Microblog Retrieval Using Ensemble of Feature Sets through Supervised Feature Selection2017

    • Author(s)
      Abu Nowshed Chy, Md Zia Ullah and Masaki Aono
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E100-D Pages: 793,806

    • DOI

      http://dx.doi.org/10.1587/transinf.2016DAP0032

    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Journal Article] Shape Retrieval of Non-rigid 3D Human Models2016

    • Author(s)
      D.Pickup, X.Sun, P.L.Rosin, R.R.Martin, Z.Cheng, Z.Lian, Masaki Aono
    • Journal Title

      International Journal of Computer Vision

      Volume: 120 Pages: 169,193

    • DOI

      http://dx.doi.org/10.1007/s11263-016-0903-8

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] A Bipartite Graph-based Ranking Approach to Query Subtopics Diversification Focused on Word Embedding Features2016

    • Author(s)
      Md Zia Ullah and Masaki Aono
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E99-D Pages: 3090,3099

    • DOI

      http://dx.doi.org/10.1587/transinf.2016EDP7190

    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Presentation] 再構成誤差の重みを類似度としたスケッチによる三次元物体の検索2017

    • Author(s)
      小林将也, 立間淳司,青野雅樹
    • Organizer
      電子情報通信学会総合大会
    • Place of Presentation
      名城大学
    • Year and Date
      2017-03-25 – 2017-03-25
  • [Presentation] 近傍集合類似度を用いた多様体ランキングによる三次元物体の形状類似検索,2017

    • Author(s)
      真田知佳,立間淳司,青野雅樹
    • Organizer
      電子情報通信学会総合大会
    • Place of Presentation
      名城大学
    • Year and Date
      2017-03-25 – 2017-03-25
  • [Presentation] 時空間自己相似ヒストグラムと統計量を用いた人物動作認識2017

    • Author(s)
      髙垣幸秀, 立間淳司, 青野雅樹
    • Organizer
      電子情報通信学会総合大会
    • Place of Presentation
      名城大学
    • Year and Date
      2017-03-25 – 2017-03-25
  • [Presentation] LSTMとCNNを用いたボクセル表現に基づく三次元形状類似検索手法の提案2017

    • Author(s)
      宮城諒, 青野雅樹
    • Organizer
      パターン認識・メディア理解(PRMU)研究会
    • Place of Presentation
      名城大学
    • Year and Date
      2017-03-21 – 2017-03-21
  • [Presentation] 単語のポジティブ・ネガティブでの出現比率に着目したツイートの極性分類2017

    • Author(s)
      姫野晋之介, 青野雅樹
    • Organizer
      言語処理学会第23回年次大会(NLP2017)
    • Place of Presentation
      筑波大学
    • Year and Date
      2017-03-16 – 2017-03-16
  • [Presentation] 化粧品レビューサイトにおけるクチコミの有用性判定2017

    • Author(s)
      髙島侑里, 青野雅樹
    • Organizer
      言語処理学会第23回年次大会(NLP2017)
    • Place of Presentation
      筑波大学
    • Year and Date
      2017-03-15 – 2017-03-15
  • [Presentation] 単語分散表現と文法的な表現に着目したカスタマーレビューの観点ごとの評価値推定2017

    • Author(s)
      大塚 達也, 青野雅樹
    • Organizer
      DEIM2017 (第9回データ工学と情報マネジメントに関するフォーラム)
    • Place of Presentation
      高山グリーンホテル
    • Year and Date
      2017-03-08 – 2017-03-08
  • [Presentation] Open World Plant Image Identification Based on Convolutional Neural Network2016

    • Author(s)
      Siang Thye Hang and Masaki Aono
    • Organizer
      Asia Pacific Signal and Information Processing Association (APSIPA2016)
    • Place of Presentation
      Jeju, Korea
    • Year and Date
      2016-12-16 – 2016-12-16
    • Int'l Joint Research
  • [Presentation] Query Subtopic Mining Exploiting Word Embedding for Search Result Diversification2016

    • Author(s)
      Md. Zia Ullah, Md. Shajalal, Abu Nowshed Chy, and Masaki Aono
    • Organizer
      12th Asia Information Retrieval Societies Conference (AIRS2016)
    • Place of Presentation
      Beijing, China
    • Year and Date
      2016-11-30 – 2016-11-30
    • Int'l Joint Research
  • [Presentation] テキストクエリで指定した画像中の領域を特定する一手法2016

    • Author(s)
      遠藤 昂, 船越孝太郎, エリック・ニコルズ, 青野雅樹
    • Organizer
      電子情報通信学会 画像工学研究会
    • Place of Presentation
      福岡大学
    • Year and Date
      2016-10-06 – 2016-10-06
  • [Presentation] Bluefield (KDE TUT) at LifeCLEF 2016 Plant Identification Task2016

    • Author(s)
      Siang Thye Hang, Atsushi Tatsuma, and Masaki Aono
    • Organizer
      LifeCLEF 2016 Workshop in Conference and Labs of the Evaluation Forum (CLEF2016)
    • Place of Presentation
      University of Évora, Portugal
    • Year and Date
      2016-09-06 – 2016-09-06
    • Int'l Joint Research
  • [Presentation] Query Subtopic Diversification based on Cluster Ranking and Semantic Feature,2016

    • Author(s)
      Md Shajalala, Md Zia Ullahb, Abu Nowshed Chy, and Masaki Aono
    • Organizer
      The 2016 International Conference on Advanced Informatics: Concepts, Theory and Applications (ICAICTA 2016)
    • Place of Presentation
      Penang, Malaysia
    • Year and Date
      2016-08-18 – 2016-08-18
    • Int'l Joint Research
  • [Presentation] 顕著性マップを用いた画像の説明文自動生成2016

    • Author(s)
      吉井和輝, エリック・ニコルズ, 船越孝太郎, 中野幹生, 青野雅樹
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      北九州国際会議センター
    • Year and Date
      2016-06-09 – 2016-06-09
  • [Presentation] KDETM at NTCIR-12 Temporalia Task: Combining a Rule-based Classifier with Weakly Supervised Learning for Temporal Intent Disambiguation2016

    • Author(s)
      Abu Nowshed Chy, Md Zia Ullah, Md Shajalal and Masaki Aono
    • Organizer
      NTCIR12, Temporalia-2
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-06-08 – 2016-06-08
    • Int'l Joint Research
  • [Presentation] KDEIM at NTCIR-12 IMine-2 Search Intent Mining Task: Query Understanding through Diversified Ranking of Subtopics2016

    • Author(s)
      Md Zia Ullah, Md Shajalal and Masaki Aono
    • Organizer
      NTCIR12, IMine-2
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-06-08 – 2016-06-08
    • Int'l Joint Research
  • [Presentation] Shape Retrieval of Low-Cost RGB-D Captures2016

    • Author(s)
      Pedro B. Pascoal, Pedro Proença, Filipe Gaspar, Miguel Sales Dias, Alfredo Ferreira, Atsushi Tatsuma, Masaki Aono
    • Organizer
      9th Eurographics Workshop on 3D Object Retrieval
    • Place of Presentation
      Lisbon, Portugal
    • Year and Date
      2016-05-09 – 2016-05-09
    • Int'l Joint Research
  • [Presentation] Partial Shape Queries for 3D Object Retrieval2016

    • Author(s)
      Ioannis Pratikakis, Michalis A. Saveloys, Takahiko Furuya, Ryutarou Ohbuchi, Masaki Aono, Shoki Tashiro
    • Organizer
      9th Eurographics Workshop on 3D Object Retrieval
    • Place of Presentation
      Lisbon, Portugal
    • Year and Date
      2016-05-09 – 2016-05-09
    • Int'l Joint Research
  • [Presentation] Large-Scale 3D Shape Retrieval from ShapeNet Core552016

    • Author(s)
      M. Savva, F. Yu, Hao Su, M. Aono, B. Chen, D. Cohen-Or
    • Organizer
      9th Eurographics Workshop on 3D Object Retrieval
    • Place of Presentation
      Lisbon, Portugal
    • Year and Date
      2016-05-09 – 2016-05-09
    • Int'l Joint Research
  • [Patent(Industrial Property Rights)] 三次元モデル検索方法及び三次元モデル検索システム2017

    • Inventor(s)
      青野雅樹、小林祐輝
    • Industrial Property Rights Holder
      青野雅樹、小林祐輝
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2017-029425
    • Filing Date
      2017-02-20
  • [Patent(Industrial Property Rights)] 画像特徴量及びそれを用いる三次元形状検索システム2017

    • Inventor(s)
      立間淳司、小林将也、青野雅樹
    • Industrial Property Rights Holder
      立間淳司、小林将也、青野雅樹
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2017-042156
    • Filing Date
      2017-03-06

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi