1000クラスに対応した大規模一般画像認識システムの実現

• 研究課題/領域番号: 20680010
• 研究種目: 若手研究(A)
• 配分区分: 補助金
• 研究分野: 知覚情報処理・知能ロボティクス
• 研究機関: 電気通信大学
• 研究代表者: 柳井 啓司 電気通信大学, 大学院・情報理工学研究科, 准教授 (20301179)
• 研究期間 (年度): 2008 – 2010
• 研究課題ステータス: 完了 (2010年度)
• 配分額: 24,310千円 (直接経費: 18,700千円、間接経費: 5,610千円); 2010年度: 9,880千円 (直接経費: 7,600千円、間接経費: 2,280千円); 2009年度: 5,850千円 (直接経費: 4,500千円、間接経費: 1,350千円); 2008年度: 8,580千円 (直接経費: 6,600千円、間接経費: 1,980千円)
• キーワード: 一般物体認識 / 画像認識 / Webマルチメディアマイニング / 大量クラス / Web画像マイニング / メディア情報学 / 人工知能 / 画像認識システム

研究概要

本研究では多数のクラスに対応した大規模一般画像認識システムの実現およびそれに関連する研究を行い,以下の成果を得た.(1)1000種類の画像DBの構築,(2)200万枚のWeb画像を用いた画像オントロジーの構築,(3)100種類の食事画像に対応した食事画像認識システムの構築,(4)100種類の動作に対応した動作ショットデータベースの自動構築,(5)視覚概念と位置の関係の分析.

研究成果

• [雑誌論文] Folksonomyを用いた画像特徴とタグ共起に基づく画像オントロジーの自動構築 (2011)
  • 著者名/発表者名: 秋間雄太, 川久保秀敏, 柳井啓司
  • 雑誌名: 電子情報通信学会論文誌D 巻: Vol.J94-D, No.8 ページ: 1248-1259
  • NAID: 110008686476
• [雑誌論文] 単語概念の視覚性と地理的分布の関係性の分析 (2010)
  • 著者名/発表者名: 川久保秀敏, 柳井啓司
  • 雑誌名: 電子情報通信学会論文誌D 巻: Vol.J93-D, No.8 ページ: 1417-1428
  • NAID: 110007681679
• [雑誌論文] Multiple Kernel Learningによる50種類の食事画像の認識 (2010)
  • 著者名/発表者名: 上東太一, 柳井啓司
  • 雑誌名: 電子情報通信学会論文誌D 巻: Vol.J93-D, No.8 ページ: 1397-1406
  • NAID: 110007681672
• [雑誌論文] Associating faces and names in Japanese photo news articles (2010)
  • 著者名/発表者名: Akio Kitahara, Keiji Yanai
  • 雑誌名: Progressin Informatics 巻: No.7 ページ: 73-70
• [雑誌論文] Associating Faces and Names in Japanese Photo News Articles on the Web (2010)
  • 著者名/発表者名: Akio Kitahara, Keiji Yanai
  • 雑誌名: Progress in Informatics No.7 ページ: 63-70
  • 査読あり
• [雑誌論文] Web Image Selection by PLSA (2008)
  • 著者名/発表者名: Keiji Yanai
  • 雑誌名: Proc. of the International Conference on Multimedia and Expo 1 ページ: 1373-1376
  • 査読あり
• [雑誌論文] Automatic Web Image Selection with a Probabilistic Latent Topic Model (2008)
  • 著者名/発表者名: Keiji Yanai
  • 雑誌名: Proc. of the Seventeenth International World Wide Web Conference 1 ページ: 1237-1238
  • 査読あり
• [雑誌論文] Objects over the World (2008)
  • 著者名/発表者名: Bingyu Qiu and Keiji Yanai
  • 雑誌名: Proc. of the Pacific-Rim Conference on Multimedia (Springer LNCS) 5353 ページ: 396-305
  • 査読あり
• [学会発表] A Travel Planning System Based on Travel Trajectories Extracted from a Large Number of Geotagged Photos on the Web (2011)
  • 著者名/発表者名: Kohya Okuyama, Keiji Yanai
  • 学会等名: Proc. of Pacific-Rim Conference Multimedia
  • 発表場所: Sydney, Australia
• [学会発表] Automatic Construction of an Action Video Shot Database using Web Videos (2011)
  • 著者名/発表者名: Do Hang Nga, Keiji Yanai
  • 学会等名: Proc. of IEEE International Conference on Computer Vision (ICCV)
  • 発表場所: Barcelona, Spain
• [学会発表] Geo Visual Rank: A Ranking Method of Geotagged Images Considering Visual Similarity and Geo-location Proximity (2011)
  • 著者名/発表者名: Hidetoshi Kawakubo, Keiji Yanai
  • 学会等名: Proc. of the Nineteenth International World Wide Web Conference (WWW)
  • 発表場所: Hyderabad, India
• [学会発表] GeoVisualRank : A Ranking Method of Geotagged Images Considering Visual Similarity and Geo-location Proximity (2011)
  • 著者名/発表者名: Hidetoshi Kawakubo, Keiji Yanai
  • 学会等名: ACM International World Wide Web Conference (WWW)
  • 発表場所: Hyderabad, India
• [学会発表] Automatic Construction of an Action Video Shot Database using Web Videos (2011)
  • 著者名/発表者名: Do Hang Nga, Keiji Yanai
  • 学会等名: IEEE International Conference on Computer Vision (ICCV)
  • 発表場所: Barcelona, Spain
• [学会発表] A Travel Planning System Based on Travel Trajectories Extracted from a Large Number of Geotagged Photos on the Web (2011)
  • 著者名/発表者名: Kohya Okuyama, Keiji Yanai
  • 学会等名: Pacific-Rim Conference on Multimedia
  • 発表場所: Sydney, Australia
• [学会発表] 一般物体認識技術の発展 (2011)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 精密工学会画像応用技術専門委員会研究会
  • 発表場所: 東京(招待講演)
• [学会発表] 物体認識技術を用いた食事画像認識 (2011)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 人工知能セミナー「食とAI～消費・小売流通・生産の立場から～」
  • 発表場所: 東京(招待講演)
• [学会発表] Webマルチメディアと物体認識 (2011)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 電子情報通信学会パターン認識・メディア理解研究会
  • 発表場所: 千葉(招待講演)
• [学会発表] Region-based Automatic Web Image Selection (2010)
  • 著者名/発表者名: Keiji Yanai, Kobus Barnard
  • 学会等名: ACM International Conference on Multimedia Information Retrieval
  • 発表場所: Philadelphia, USA
  • 年月日: 2010-03-28
• [学会発表] Geotagged Image Recognition by Combining Three Different Kinds of Geolocation Features (2010)
  • 著者名/発表者名: Keita Yaegashi, Keiji Yanai
  • 学会等名: Proc. of Asian Conference on Computer Vision (ACCV)
  • 発表場所: Queenstown, New Zealand
• [学会発表] A SURF-based Spatio-Temporal Feature for Feature-fusion-based Action Recognition (2010)
  • 著者名/発表者名: Akitsugu Noguchi, Keiji Yanai
  • 学会等名: Proc. of ECCV WS on Human Motion: Understanding, Modeling, Capture and Animation
  • 発表場所: Crete, Greece
• [学会発表] Geotagged Photo Recognition using Corresponding Aerial Photos with Multiple Kernel Learning (2010)
  • 著者名/発表者名: Keita Yaegashi, Keiji Yanai
  • 学会等名: Proc. of IAPR International Conference Pattern Recognition (ICPR)
  • 発表場所: Istanbul, Turkey
• [学会発表] Region-based Automatic Web Image Selection (2010)
  • 著者名/発表者名: Keiji Yanai, Kobus Barnard
  • 学会等名: Proc. of ACM International Conference on Multimedia Information Retrieval (MIR)
  • 発表場所: Philadelphia, USA
• [学会発表] Geotagged Photo Recognition using Corresponding Aerial Photos with Multiple Kernel Learning (2010)
  • 著者名/発表者名: Keita Yaegashi, Keiji Yanai
  • 学会等名: IAPR International Conference on Pattern Recognition (ICPR)
  • 発表場所: Istanbul, Turkey
• [学会発表] Geotagged Image Recognition by Combining Three Different Kinds of Geolocation Features (2010)
  • 著者名/発表者名: Keita Yaegashi, Keiji Yanai
  • 学会等名: Asian Conference on Computer Vision (ACCV)
  • 発表場所: Queenstown, New Zealand
• [学会発表] A SURF-based Spatio-Temporal Feature for Feature-fusion-based Action Recognition (2010)
  • 著者名/発表者名: Akitsugu Noguchi, Keiji Yanai
  • 学会等名: ECCV WS on Human Motion : Understanding, Modeling, Capture and Animation
  • 発表場所: Crete, Greece
• [学会発表] 一般物体認識における機械学習の利用 (2010)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 電子情報通信学会情報論的学習と機械学習研究会(IBIS-ML)
  • 発表場所: 東京(招待講演)
• [学会発表] 画像・映像の認識と意味的検索 (2010)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 電子情報通信学会音声研究会(SP)
  • 発表場所: 仙台(招待講演)
• [学会発表] Detecting "In-play" Photos from Web Sports News Photos (2009)
  • 著者名/発表者名: Akio Kitahara, Keiji Yanai
  • 学会等名: Pacific-Rim Conference on Multimedia
  • 発表場所: Bangkok, Thailand
  • 年月日: 2009-12-16
• [学会発表] チュートリアル 一般物体認識 (2009)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: 電子情報通信学会パターン認識・メディア理解研究会
  • 発表場所: 金沢
  • 年月日: 2009-11-26
• [学会発表] A Food Image Recognition System with Multiple Kernel Learning (2009)
  • 著者名/発表者名: Taichi Joutou, Keiji Yanai
  • 学会等名: International Conference on Image Processing
  • 発表場所: Cairo, Egypt
  • 年月日: 2009-11-08
• [学会発表] Extracting Spatio-temporal Local Features Considering Consecutiveness of Motions (2009)
  • 著者名/発表者名: Akitsugu Noguchi, Keiji Yanai
  • 学会等名: Asian Conference on Computer Vision
  • 発表場所: Xian, China
  • 年月日: 2009-09-24
• [学会発表] A Visual Analysis of the Relationship between Word Concepts and Geographical Locations (2009)
  • 著者名/発表者名: Keiji Yanai, Hidetoshi Kawakubo, Qiu Bingyu
  • 学会等名: ACM International Conference of Image and Video Retrieval
  • 発表場所: Santorini, Greece
  • 年月日: 2009-07-09
• [学会発表] An Analysis of the Relation between Visual Concepts and Geo-locations using Geotagged Images on the Web (2009)
  • 著者名/発表者名: Hidetoshi Kawakubo, Keiji Yanai
  • 学会等名: IEEE ICME WS on Internet Multimedia Search and Mining
  • 発表場所: New York, USA
  • 年月日: 2009-07-03
• [学会発表] Web Image Gathering with Region-based Bag-of-Features and Multiple Instance Learning (2009)
  • 著者名/発表者名: 柳井啓司
  • 学会等名: IEEE International Conference on Multimedia and Expo
  • 発表場所: New York, USA
  • 年月日: 2009-07-01
• [学会発表] Mining Cultural Differences from a Large Number of Geotagged Photo (2009)
  • 著者名/発表者名: Keiji Yanai, Bingyu Qiu
  • 学会等名: International World Wide Web Conference
  • 発表場所: Madrid, Spain
  • 年月日: 2009-04-22
• [学会発表] Multiple Kernel Learningを用いた食べ物画像の認識 (2009)
  • 著者名/発表者名: 上東太一, 柳井啓司
  • 学会等名: 情報処理学会イメージメディア研究会
  • 発表場所: 仙台
  • 年月日: 2009-03-13
• [学会発表] Detecting "In-play" Photos from Web Sports News Photos (2009)
  • 著者名/発表者名: Akio Kitahara, Keiji Yanai
  • 学会等名: Proc. of the Pacific-Rim Conference on Multimedia
  • 発表場所: Bangkok, Thailand
• [学会発表] A Food Image Recognition System with Multiple Kernel Learning (2009)
  • 著者名/発表者名: Taichi Joutou, Keiji Yanai
  • 学会等名: Proc. of International Conference on Image Processing (ICIP)
  • 発表場所: Cairo, Egypt
• [学会発表] Extracting Spatio-temporal Local Features Considering Consecutiveness of Motions (2009)
  • 著者名/発表者名: Akitsugu Noguchi, Keiji Yanai
  • 学会等名: Proc. of Asian Conference on Computer Vision (ACCV)
  • 発表場所: Xian, China
• [学会発表] A Visual Analysis of the Relationship between Word Concepts and Geographical LocationsA Visual Analysis of the Relationship between Word Concepts and Geographical Locations (2009)
  • 著者名/発表者名: Keiji Yanai, Hidetoshi Kawakubo, Qiu Bingyu
  • 学会等名: Proc. of ACM International Conference of Imageand Video Retrieval (CIVR)
  • 発表場所: Santorini, Greece
• [学会発表] Web Image Gathering with Region-based Bag-of-Features and Multiple Instance Learning (2009)
  • 著者名/発表者名: Keiji Yanai
  • 学会等名: IEEE International Conference on Multimedia and Expo (ICME)
  • 発表場所: New York, USA
• [学会発表] Can Geotags Help Image Recognition ? (2009)
  • 著者名/発表者名: Keita Yaegashi, Keiji Yanai
  • 学会等名: Proc. of Pacific-Rim Symposium on Image and Video Technology
  • 発表場所: Tokyo, Japan
• [学会発表] Objects over the World (2008)
  • 著者名/発表者名: Bingyu Qiu, Keiji Yanai
  • 学会等名: Proc. of the Pacific-Rim Conference on Multimedia
  • 発表場所: Tainan, Taiwan
• [学会発表] Rushes Summarization Based on Color Motion and Face (2008)
  • 著者名/発表者名: Akitsugu Noguchi, Keiji yanai
  • 学会等名: Proc. of ACMMM Workshop on Summarization
  • 発表場所: TRECVID Vancouver, Rush Canada
• [図書] Entropy-based Analysis of Visual Concepts, In "Multimedia Information Extraction" (2012)
  • 著者名/発表者名: Keiji Yanai, Hidetoshi Kawakubo, Kobus Barnard
  • 出版者: Wiley-IEEE Computer Society Press
• [図書] Mining Regional Representative Photos from a Consumer-Generated Geotagged Photo Database, In "Handbook of Social Network Technologies and Applications" (2010)
  • 著者名/発表者名: Keiji Yanai, Bingyu Qiu
  • 出版者: Springer
• [図書] Handbook of Social Network Technologies and Applications (2010)
  • 著者名/発表者名: Keiji Yanai, Bingyu Qiu
  • 総ページ数: 716
  • 出版者: Springer
• [図書] コンピュータビジョン最先端ガイドIII (2010)
  • 著者名/発表者名: 柳井啓司
  • 総ページ数: 185
  • 出版者: アドコム・メディア株式会社
• [図書] Handbook of Social Networks (2010)
  • 著者名/発表者名: Keiji Yanai, Bingyu Qiu
  • 総ページ数: 400
  • 出版者: Springer(予定)
• [備考]
  • URL: http://mm.cs.uec.ac.jp/
• [備考]
  • URL: https://twitter.jp/foodimg_bot/
• [備考]
  • URL: http://mm.cs.uec.ac.jp/
• [産業財産権] 画像ランキング方法、プログラム及び記憶媒体並びに画像表示システム (2010)
  • 発明者名: 川久保秀敏, 柳井啓司
  • 権利者名: 電気通信大学
  • 産業財産権番号: 2010-109454
  • 出願年月日: 2010-05-11
• [産業財産権] 画像ランキング方法、プログラム及び記憶媒体並びに画像表示システム (2010)
  • 発明者名: 川久保秀敏,柳井啓司
  • 権利者名: 電気通信大学
  • 産業財産権番号: 2010-109454
  • 出願年月日: 2010-05-11
• [産業財産権] 画像処理方法、その方法を実行するプログラム、記憶媒体、撮像機器、画像処理システム (2008)
  • 発明者名: 柳井啓司
  • 権利者名: 電気通信大学
  • 産業財産権番号: 2008-106546
  • 出願年月日: 2008-04-16