大規模位置情報画像マイニングによる画像と視覚概念の関係の地域性に関する総合的研究

• 研究課題/領域番号: 24300036
• 研究種目: 基盤研究(B)
• 配分区分: 一部基金
• 応募区分: 一般
• 研究分野: メディア情報学・データベース
• 研究機関: 電気通信大学
• 研究代表者: 柳井 啓司 電気通信大学, 情報理工学(系)研究科, 教授 (20301179)
• 研究期間 (年度): 2012-04-01 – 2016-03-31
• 研究課題ステータス: 完了 (2015年度)
• 配分額: 17,290千円 (直接経費: 13,300千円、間接経費: 3,990千円); 2015年度: 4,030千円 (直接経費: 3,100千円、間接経費: 930千円); 2014年度: 4,420千円 (直接経費: 3,400千円、間接経費: 1,020千円); 2013年度: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円); 2012年度: 4,940千円 (直接経費: 3,800千円、間接経費: 1,140千円)
• キーワード: 画像マイニング / 視覚概念分析 / 画像認識 / 位置情報 / 物体認識 / Web画像マイニング / 位置情報画像 / ジオタグ / Twitter画像 / ソーシャルメディア / 大規模データ処理

研究成果の概要

本研究では Web 上に大量に存在する位置情報付きの画像データを利用して，視覚的な情報に基づく，世界中の様々な物体，シーン等についての世界規模での文化的・地理的な差異を発見・分析する「位置情報画像マイニング」の手法の開発および大規模実験を行った．研究成果は次の通りである．(1)位置情報画像マイニングの手法の開発を行った．(2)位置情報を考慮した画像のランキング手法GeoVisualRankを提案した．(3)Flickr画像を用いて一般物体画像について「位置」「時間」による大規模分析を行った．(4)Twitter位置情報付き画像を用いて「イベント」「食事」画像の位置との関係の大規模分析を行った．

研究成果

• [雑誌論文] [Invited Paper] A Review of Web Image Mining (2015)
  • 著者名/発表者名: Yanai, K.
  • 雑誌名: ITE Transactions on Media Technology and Applications 巻: 3 号: 3 ページ: 156-169
  • DOI: 10.3169/mta.3.156
  • NAID: 130005086731
  • ISSN: 2186-7364
  • 査読あり / オープンアクセス
• [雑誌論文] 既存カテゴリーの利用とクラウドソーシングによる食事画像データセットの自動拡張 (2015)
  • 著者名/発表者名: 河野 憲之 and 柳井 啓司
  • 雑誌名: 電子情報通信学会論文誌 D 巻: 4 ページ: 585-597
  • 査読あり
• [雑誌論文] Event Photo Mining from Twitter Using Keyword Bursts and Image Clustering (2015)
  • 著者名/発表者名: Takamu Kaneko and Keiji Yanai
  • 雑誌名: Neurocomputing 巻: - ページ: 143-158
  • DOI: 10.1016/j.neucom.2015.02.081
  • 査読あり
• [雑誌論文] VisualTextualRank: An Extension of VisualRank to Large-Scale Video Shot Extraction Exploiting Tag Co-occurrence (2015)
  • 著者名/発表者名: Do Hang Nga and Keiji Yanai
  • 雑誌名: IEICE Transactions on Information and Systems 巻: E98.D 号: 1 ページ: 166-172
  • DOI: 10.1587/transinf.2014EDP7106
  • NAID: 130004721745
  • ISSN: 0916-8532, 1745-1361
  • 査読あり
• [雑誌論文] FoodCam: A Real-time Food Recognition System on a Smartphone (2014)
  • 著者名/発表者名: Yoshiyuki Kawano and Keiji Yanai
  • 雑誌名: Multimedia Tools and Applications 巻: - 号: 14 ページ: 5263-5287
  • DOI: 10.1007/s11042-014-2000-8
  • 査読あり
• [雑誌論文] Automatic Extraction of Relevant Video Shots of Specific Actions Exploiting Web Data (2014)
  • 著者名/発表者名: Do Hang Nga and Keiji Yanai
  • 雑誌名: Computer Vision and Image Understanding 巻: Vol. 118 ページ: 2-15
  • DOI: 10.1016/j.cviu.2013.03.009
  • 査読あり
• [雑誌論文] 道案内動画の作成のためのウェアラブルカメラ映像の自動要約 (2014)
  • 著者名/発表者名: 岡本昌也，柳井啓司
  • 雑誌名: 電子情報通信学会 論文誌D 巻: J97-D, No.8
• [雑誌論文] 複数品目が含まれる食事画像の認識における共起関係の利用 (2013)
  • 著者名/発表者名: 松田裕司, 柳井啓司
  • 雑誌名: 電子情報通信学会論文誌 巻: J95-D-8
  • NAID: 110009634944
  • 査読あり
• [雑誌論文] 候補領域推定に基づく複数品目食事画像認識 (2012)
  • 著者名/発表者名: 松田裕司, 甫足創, 柳井啓司
  • 雑誌名: 電子情報通信学会論文誌 巻: J95-D-8 ページ: 1554-1564
  • NAID: 110009489166
  • 査読あり
• [学会発表] Twitter Event Photo Detection Using Geotagged Tweets and Non-geotagged Photo Tweets (2015)
  • 著者名/発表者名: Takamu Kaneko, Nga Do Hang, Keiji Yanai
  • 学会等名: Pacific-Rim Conference on Multimedia (PCM)
  • 発表場所: Gwanju, Korea
  • 年月日: 2015-09-18
  • 国際学会
• [学会発表] CNN-Based Food Image Segmentation (2015)
  • 著者名/発表者名: Wataru Shimoda and Keiji Yanai
  • 学会等名: International Workshop on Multimedia Assisted Dietary Management (MADIMA)
  • 発表場所: Genova, Italy
  • 年月日: 2015-09-08
  • 国際学会
• [学会発表] Food Image Recognition using Deep Convolutional Network with Pre-training and Fine-tuining (2015)
  • 著者名/発表者名: Keiji Yanai, Yoshiyuki Kawano
  • 学会等名: ICME Workshop on Multimedia for Cooking and eating Activities (CEA)
  • 発表場所: Trino, Italy
  • 年月日: 2015-07-03
  • 国際学会
• [学会発表] A Visual Analysis on Recognizability and Discriminability of Onomatopoeia Words with DCNN Features (2015)
  • 著者名/発表者名: Wataru Shimoda, Keiji Yanai
  • 学会等名: IEEE International Conference on Multimedia and Expo (ICME)
  • 発表場所: Torino, Italy
  • 年月日: 2015-06-29
  • 国際学会
• [学会発表] Real-time Photo Mining from the Twitter Stream: Event Photo Discovery and Food Photo Detection (2014)
  • 著者名/発表者名: Keiji Yanai, Takamu Kaneko and Yoshiyuki Kawano
  • 学会等名: IEEE International Symposium on Multimedia (ISM)
  • 発表場所: Taichung, Taiwan
  • 年月日: 2014-12-08 – 2014-12-10
  • 招待講演
• [学会発表] Real-time Food Image Mining and Analysis from the Twitter (2014)
  • 著者名/発表者名: Keiji Yanai and Yoshiyuki Kawano
  • 学会等名: Pacific-Rim Conference on Multimedia (PCM)
  • 発表場所: Kuching, Malaysia
  • 年月日: 2014-12-01 – 2014-12-04
• [学会発表] Hand detection and tracking in videos for fine-grained action recognition (2014)
  • 著者名/発表者名: Do Hang Nga and Keiji Yanai
  • 学会等名: ACCV Workshop on Human Gait and Action Analysis in the Wild: Challenges and Applications
  • 発表場所: Singapore
  • 年月日: 2014-11-01 – 2014-11-05
• [学会発表] Visual Analysis of Tag Co-occurrence on Nouns and Adjectives (2013)
  • 著者名/発表者名: Yuya Kohaya and Keiji Yanai
  • 学会等名: Multimedia Modelling Conference (MMM)
  • 発表場所: Huangshan, China
• [学会発表] Visual Event Mining from Geo-Tweet Photos (2013)
  • 著者名/発表者名: Takamu Kaneko and Keiji Yanai
  • 学会等名: IEEE ICME Workshop on Social Multimedia Research
  • 発表場所: San Jose, USA(発表確定)
• [学会発表] World Seer : A Realtime Geo-Tweet Photo Mapping System (2012)
  • 著者名/発表者名: Keiji Yanai
  • 学会等名: ACM International Conference on Multimedia Retrieval (ICMR)
  • 発表場所: Hong Kong
• [学会発表] Automatic Collection of Web Video Shots Corresponding to Specific Actions using Web Images (2012)
  • 著者名/発表者名: Do Hang Nga and Keiji Yanai
  • 学会等名: IEEE CVPR Workshop on Large-Scale Video Search and Mining
  • 発表場所: Providence, USA
• [学会発表] Visualization of Real-World Events with IWeet Photos (2012)
  • 著者名/発表者名: Yusuke Nakaji and Keiji Yanai
  • 学会等名: IEEE ICME Workshop on Social Media Computing
  • 発表場所: Melbourn, Australia
• [学会発表] Twitter Visual Event Mining System
  • 著者名/発表者名: Takamu Kaneko, Hiroyoshi Harada, Keiji Yanai
  • 学会等名: Proc. of International Conference on Multimedia and Expo
  • 発表場所: San Jone, CA, USA
• [学会発表] A Spatio-Temporal Feature based on Triangulation of Dense SURF
  • 著者名/発表者名: Do Hang Nga and Keiji Yanai
  • 学会等名: ICCV Workshop on Action Recognition with a Large Number of Classes
  • 発表場所: Sydney, Australia
• [備考]
  • URL: http://mm.cs.uec.ac.jp/