2015 Fiscal Year Annual Research Report
バースト的な負荷変動に耐えうる投機的再構成が可能なビッグデータ処理基盤
| Project/Area Number |
25280022
|
|---|
| Research Institution | Ochanomizu University |
|---|
Principal Investigator |
小口 正人 お茶の水女子大学, 基幹研究院, 教授 (60328036)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
中野 美由紀 産業技術大学院大学, その他の研究科, 教授 (30227863)
新谷 隆彦 電気通信大学, その他の研究科, 准教授 (30604623)
山口 実靖 工学院大学, 工学部, 准教授 (50439262)
後藤 厚宏 情報セキュリティ大学院大学, その他の研究科, 教授 (90558868)
|
|---|
| Project Period (FY) |
2013-04-01 – 2016-03-31
|
| Keywords | ビッグデータ / バースト性 / 投機的再構成 / ソーシャル情報 / クラウド / SDN |
|---|
| Outline of Annual Research Achievements |
近年の情報化社会におけるデジタルデータの急増に対し、多種多様なデータを多角的に解析可能なビッグデータ処理基盤は社会基盤情報として、その重要性が増している。ビッグデータ処理基盤には、実社会の状況変動が反映されるため、バースト的な負荷変動が起こり得る。バースト的な変動は急激な負荷増大となるため、システム側の対処が難しい。
本研究ではビッグデータ処理基盤において、システムの処理負荷変動だけでなく、バースト的な負荷変動にも対応する手法の実現を目指した。このため社会要因をモニタリングし、投機的にシステム再構成を行って、極端な負荷変動が起こるようなケースにも対応可能なビッグデータ処理基盤の構築を行った。大規模災害時など実社会の状況が大きく変動する際、バースト的な負荷変動が生じるが、重い負荷が生じてからこれに対応することは困難である。そこで社会情報基盤として求められている安定した稼働状況を実現するために、本研究では実社会の情報をモニタリングし、計算機資源を投機的に確保して、システムを再構成することにより、計算機資源利用の最適化を実現した。
社会要因のモニタリングとそこからの情報抽出としては、近年重要な情報流通経路となっているSNSによるソーシャルデータの解析を行った。TwitterのようなSNSのデータ解析を行い、ここから通信ネットワークの障害に関わる情報を抽出するアプローチを行うことにより、目標を達成することができた。また緊急地震速報のように、これから被害が出る可能性のある情報も取り込んで対応するシステム環境を構築した。これらの情報を基に、大規模災害時などにクラウドや広域ネットワークをSDNなどのネットワーク技術を用いて制御する手法も確立した。これらの研究成果により、本研究の当初の目標を達成した。
|
| Research Progress Status |
27年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
27年度が最終年度であるため、記入しない。
|
| Causes of Carryover |
27年度が最終年度であるため、記入しない。
|
| Expenditure Plan for Carryover Budget |
27年度が最終年度であるため、記入しない。
|
-
-
-
-
-
-
-
-
-
-
-
[Presentation] Elasticity Improvement of Cassandra2016
Author(s)
Shohei Miyokawa, Taiki Tokuda, Saneyasu Yamaguchi
Organizer
the Tenth International Conference on Ubiquitous Information Management and Communication (IMCOM2016), S2-3
Place of Presentation
ベトナム
Year and Date
2016-01-04 – 2016-01-04
Int'l Joint Research
-
-
-
-
-
-
[Presentation] Active Caching for KVS Dynamic Scaling2015
Author(s)
Shohei Miyokawa, Taiki Tokuda and Saneyasu Yamaguchi
Organizer
The Third International Symposium on Computing and Networking (CANDAR'15), pp. 161-166
Place of Presentation
札幌市産業振興センター（北海道・札幌市）
Year and Date
2015-12-09 – 2015-12-09
Int'l Joint Research
-
-
-
-
-
-
-
-
-
-
-
-
-
