Project/Area Number |
21K11878
|
Research Category |
Grant-in-Aid for Scientific Research (C)
|
Allocation Type | Multi-year Fund |
Section | 一般 |
Review Section |
Basic Section 60060:Information network-related
|
Research Institution | Daido University |
Principal Investigator |
君山 博之 大同大学, 情報学部, 教授 (10757644)
|
Project Period (FY) |
2021-04-01 – 2024-03-31
|
Project Status |
Granted (Fiscal Year 2022)
|
Budget Amount *help |
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥390,000 (Direct Cost: ¥300,000、Indirect Cost: ¥90,000)
Fiscal Year 2022: ¥390,000 (Direct Cost: ¥300,000、Indirect Cost: ¥90,000)
Fiscal Year 2021: ¥3,380,000 (Direct Cost: ¥2,600,000、Indirect Cost: ¥780,000)
|
Keywords | 分散メッセージキュー / Apache Kafka / 疑似クラウド / VM / KVM / 性能モデル / NFV / 仮想システム |
Outline of Research at the Start |
クラウドとして世の中数多く利用されている仮想マシン(VM)については,その性能が精度良く評価できないという問題があることから,多くのユーザは必要数以上のVMを利用し,処理を行っているのが現状である.VMの性能を正しく評価できない原因として,VMがCPUやメモリなどのハードウェアを他のVMと共有して利用しており,共有に起因する性能劣化を精度よく評価できていないことが挙げられる.そこで,本研究では,実測データを元にしたモデル化とシミュレーションとの組み合わせによって,ハードウェア共有による性能劣化を高精度に推定する手法を確立し,VMを使った無駄のないシステム設計法の確立を目指す.
|
Outline of Annual Research Achievements |
複数VM上で同時に処理を行った場合のVM負荷のVM数に対する関係を評価するために,2022年度は,2021年度に導入したPCサーバを用いて,大同大学内に構築した疑似的なクラウド環境に立ち上げた複数のVMそれぞれに対して,オープンソースソフトウェアのメッセージキューイングシステムであるApache Kafkaを導入し,複数VMを使った並列分散型のメッセージキューイングKafka Brokerシステムを実現した.さらに,そのKafka Brokerシステム内の任意の数のKafka Brokerに対してメッセージの分散書き込みを行うためのKafka Producerアプリケ-ション,および,任意の数のKafka Brokerから分散書き込みされたメッセージを読み出すためのKafka Cunsumerアプリケーションの設計およびその実装を行った. これらのシステムを使って,分散されたKafka Brokerに対してKafka Producerアプリケーションからほぼ均等にメッセージを書き込めること,および,Kafka Brokerに対して分散書き込みされたメッセージをKafka Consumerアプリケ-ションで読み出せることを確認した. 一方で,Kafka Producerアプリケ-ションによる書き込み処理実行時のVMおよびKafka Producerアプリケ-ションを実行したPCについてCPU負荷を測定したところ,Kafka Brokerの数に対してほとんどの変動のないことが確認され,複数のKafka Brokerに対するメッセージの書き込みが並列に行われず,1VMずつシリアライズされて実行されていることが判明した.これらのことから,同時に実行するVM数に対する負荷を計測したい場合には,並列化のための実装がKafka ProducerアプリケーションおよびKafka Consumerアプリケ-ションの両方に必要であることが判った.
|
Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
Apache Kafkaがバージョン3に更新されたときに複数のVMを使った分散環境の構築方法の変更があり,さらに,公開されているドキュメントにそのことがほとんど書かれておらず,環境構築に大幅な時間を費やしてしまった.さらに,並列書き込みおよび並列読み出しを行うためには,ドキュメントには無い実装が必要であることが判明するまでにも,相当な時間を費やしてしまった.
|
Strategy for Future Research Activity |
2023年度は,Apache Kafkaで利用できる並列書き込みと並列読み出しができる,Kafka ProducerアプリケーションおよびKafka Consumerアプリケ-ションを設計実装し,大同大学内に構築した擬似的なクラウド環境上に複数のVMを設定し,そこで,Apache Kafkaを使った分散メッセージキューシステムを使った場合,VMでの処理負荷がVM数に対してどのように変化するかを実測する.それと並行して,並列書き込みと並列読み出しができる簡易な複数VMを使ったデータベースシステムを実装し,Mでの処理負荷がVM数に対してどのように変化するかを実測する.これらの実測結果を元にVMの処理負荷を記述することが出来る数学モデルを提案し,その実証を行っていく予定である.
|