OS X 10.9 Marvericks に JMeter をインストールして RabbitMQ の負荷テストをした

cloudpack の自称 Sensu芸人のかっぱこと川原洋平（@inokara）です。

目標

jmeter を使って RabbitMQ に負荷を掛ける
負荷をかけてみて sensu で利用する RabbitMQ 用のインスタンスのスペックをざっくり見積もる
HA Proxy や Route 53 でのフラッピングを実行して挙動を確認する

task

JDK のインストール
jmeter のインストール
JDK の RabbitMQ プラグインをインストールする
シナリオに従い RabbitMQ クラスタに負荷をかける
負荷をかけた状態でクラスタ内のフェールオーバーを試す

設定のStep

JDK のインストール

こちらからダウンロード
展開
インストーラーをダブルクリックするだけ（簡単）

jmeter のインストール

バイナリのダウンロードから始める
こちらも展開して適当なディレクトリに移動
バイナリを起動する
```
cd $PATH/to/apache-jmeter-2.11/bin/
java -jar ApacheJMeter.jar
```
起動すると以下のような画面が表示される。

やったー！

jmeter の RabbitMQ プラグインをインストールする

インストールするプラグイン
jlavallee/JMeter-Rabbit-AMQP

事前準備

ant のインストール

プラグインは ant でビルドする必要があるので ant をインストールする。

brew install ant

RabbitMQ のクライアントライブラリをダウンロードしてコピーしておく

wget http://www.rabbitmq.com/releases/rabbitmq-java-client/v3.3.1/rabbitmq-java-client-bin-3.3.1.zip
unzip rabbitmq-java-client-bin-3.3.1.zip
cd rabbitmq-java-client-bin-3.3.1
cp rabbitmq-client.jar ~/bin/$PATH/to/apache-jmeter-2.11/lib/

プラグインのソースコードを clone する

git clone https://github.com/jlavallee/JMeter-Rabbit-AMQP.git

プラグインのビルドとインストール

ant を使ってビルドする
```
cd JMeter-Rabbit-AMQP
ant
```
しばらくすると…

とりあえずビルドは完了！！

インストールという名のコピー

cp /$PATH/to/JMeter-Rabbit-AMQP/target/dist/JMeterAMQP.jar ~/bin/$PATH/to/apache-jmeter-2.11/lib/ext/

早速実行や！

簡単なシナリオの作成

シナリオというほどでもないが以下のような条件で Consumer と Publisher のサンプラーを設定してみる。

スレッド数 : 50
Ramp-Up 期間 : 0
ループ回数 : 無限ループ

以下、サンプラーの設定。

実行！と思った矢先…

JMeter で以下のようなエラーを吐いてしまいテストが実行出来ない…

ERROR - jmeter.threads.JMeterThread: Test failed! java.lang.NoClassDefFoundError: org/apache/commons/lang/StringUtils
    at com.zeroclue.jmeter.protocol.amqp.AMQPSampler.initChannel(AMQPSampler.java:92)
    at com.zeroclue.jmeter.protocol.amqp.AMQPConsumer.initChannel(AMQPConsumer.java:304)
    at com.zeroclue.jmeter.protocol.amqp.AMQPConsumer.sample(AMQPConsumer.java:56)
    at org.apache.jmeter.threads.JMeterThread.process_sampler(JMeterThread.java:429)
    at org.apache.jmeter.threads.JMeterThread.run(JMeterThread.java:257)
    at java.lang.Thread.run(Thread.java:744)

以下の Pull Request に基づいて対応。

https://github.com/jamlo/ : April 5, 2014

diff --git a/ivy.xml b/ivy.xml
index dc225ab..3d5e242 100644
--- a/ivy.xml
+++ b/ivy.xml
@@ -5,7 +5,7 @@
     
     
     
-        
+

及び…

diff --git a/src/main/com/zeroclue/jmeter/protocol/amqp/AMQPSampler.java b/src/main/com/zeroclue/jmeter/protocol/amqp/AMQPSampler.java
index 88df892..0d091e0 100644
--- a/src/main/com/zeroclue/jmeter/protocol/amqp/AMQPSampler.java
+++ b/src/main/com/zeroclue/jmeter/protocol/amqp/AMQPSampler.java
@@ -14,7 +14,7 @@ import com.rabbitmq.client.Channel;
 import com.rabbitmq.client.Connection;
 import com.rabbitmq.client.ConnectionFactory;
 import com.rabbitmq.client.MessageProperties;
-import org.apache.commons.lang.StringUtils;
+import org.apache.commons.lang3.StringUtils;

public abstract class AMQPSampler extends AbstractSampler implements ThreadListener {

各ファイル（ ivy.yml と /src/main/com/zeroclue/jmeter/protocol/amqp/AMQPSampler.java ）を上記のように修正して再度の ant を実行。実行後にあらためて JMeter の lib/ext/ 以下にコピーして JMeter を再起動する。

気を取り直して負荷をかけてみる

以下のように緑色の矢印アイコンをクリックして実行する。

並行してマシンのリソースも監視したいので RabbitMQ の HTTP API でメトリクスを取得して Graphite に突っ込んでモニタリングしてみる。

t1.micro インスタンスにて RabbitMQ が使用出来るメモリは 240MB 程度と自動計算されており、実際の使用量は 50MB 程度を推移した。

負荷をかけた状態でのクラスタ内のフェールオーバーについて

注意点

JMeter の DNS キャッシュの影響を受けて JMeter のログには大量の接続エラーが発生してしまった

Route 53 にて

高負荷をかけた状態においても RabbitMQ にアクセスするクライアントはフェールオーバーを検知して接続先の RabbitMQ は正常に切り替わった
フェールオーバーに関しては TTL や Healt Check の設定により一定の時間を要してしまう（今回の検証では約 30 秒程度でフェールオーバーした）

HA Proxy にて

高負荷をかけた状態においても RabbitMQ にアクセスするクライアントはフェールオーバーを検知して接続先の RabbitMQ は正常に切り替わった
フェールオーバーに関して HA Proxy の設定により一定の時間を要してしまう（今回の検証では約 5 秒程度でフェールオーバーした）

まとめ

負荷に対して

基本的には小さいと思われる
但し、t1.micro は辛いかも
但し OS レベルのチューニングは必要になる可能性はある
- File descriptors
- Socket descriptors
メモリ使用量に関してはノードの物理メモリから RabbitMQ で自動計算され、その値が上限値として設定される
また、行儀の悪いアプリケーションの場合にコネクションが滞留してしまい、結果としてキューの滞留等が発生してしまう可能性はある
今のところ Sensu に関しては行儀は良いと思われる

負荷を与えた状態の RabbitMQ のフェールオーバーについて

JMeter の場合には DNS キャッシュが効いてしまい正常な計測は出来なかった

気をつけるポイント

また、 JMeter が一度起動してしまうと DNS キャッシュが開放されずダウンさせた RabbitMQ ノードにアクセスしてしまった（ JMeter を起動する際に -Dsun.net.inetaddr.ttl=0 オプションを指定して起動することでこの問題は回避出来るかもしれない）
完全な RabbitMQ クライアント（ Sensu サーバーやクライアント、API）の挙動をエミュレートすることは出来なかった
- 尚、Sensu サーバーやクライアントについては DNS の変更や HA Proxy のフェールオーバーに追随する

元記事はこちら

OS X 10.9 Marvericks に JMeter をインストールして RabbitMQ の負荷テストをした

目標

task

設定のStep

JDK のインストール

jmeter のインストール

jmeter の RabbitMQ プラグインをインストールする

プラグインのビルドとインストール

早速実行や！

簡単なシナリオの作成

実行！と思った矢先…

気を取り直して負荷をかけてみる

負荷をかけた状態でのクラスタ内のフェールオーバーについて

まとめ

負荷に対して

負荷を与えた状態の RabbitMQ のフェールオーバーについて

気をつけるポイント

IT健保「鮨一新」食レポ

Amazon Managed Grafanaへのログイン手段を考える〜IAM Identity Center以外のSAML認証の選択肢〜

AWSの生成AI活用事例集GenUを使い倒す

【次世代MSP】SLI / SLO を定義してみた～ New Relic でサービスの見える化に挑戦！

cron の代わりに systemd timer を使ってみた

OS X 10.9 Marvericks に JMeter をインストールして RabbitMQ の負荷テストをした

目標

task

設定のStep

JDK のインストール

jmeter のインストール

jmeter の RabbitMQ プラグインをインストールする

プラグインのビルドとインストール

早速実行や！

簡単なシナリオの作成

実行！と思った矢先…

気を取り直して負荷をかけてみる

負荷をかけた状態でのクラスタ内のフェールオーバーについて

まとめ

負荷に対して

負荷を与えた状態の RabbitMQ のフェールオーバーについて

気をつけるポイント

関連記事Related Articles

CentOS6.2にlsyncdをインストール

HAProxyのbackupオプションで障害時のみ別AZを利用

ログインユーザー(認証)をOpenLDAPで管理(冗長化編)

可視化して解る cgroup による CPU リソース制限

Sensuの通知をslackで受け取るインターネット入門