[RabbitMQ]キューごとのメモリ消費量を確認

TIPS
TIPSコマンド

rabbitmqctl および rabbitmq-diagnostics コマンドを使用することで、ノード全体のメモリ内訳やキューごとのメモリ消費量、タスク滞留数・処理レートをCLIから直接確認できます。

1. キューごとのメモリ消費量とタスク数の確認

各キューが消費しているメモリ(バイト単位)や、待機中・処理中のタスク数、接続ワーカー数を一覧表示します。

sudo rabbitmqctl list_queues name messages messages_ready messages_unacknowledged memory consumers
  • 出力項目の意味:
    • name: キュー名
    • messages: 合計メッセージ数
    • messages_ready: 処理待ちのタスク数
    • messages_unacknowledged: ワーカーが取得して現在処理中のタスク数
    • memory: そのキューが消費しているメモリ量(Bytes)
    • consumers: 接続中のワーカープロセス数
Custom Styles
{"version": 3, "isGlobalStylesUserThemeJSON": true }

2. タスク処理レート(秒間スループット)の確認

どのキューにどのくらいの頻度でタスクが投入され、消費されているかをリアルタイムに確認します。

sudo rabbitmqctl list_queues name memory messages message_stats.publish_details.rate message_stats.deliver_get_details.rate
  • publish_details.rate: 1秒あたりに投入されているタスク数 (msg/s)
  • deliver_get_details.rate: 1秒あたりにワーカーへ渡されているタスク数 (msg/s)

3. RabbitMQ全体のメモリ使用内訳の分析

プロセス全体でどの要素(キュー本体、接続、バイナリデータ等)がメモリを圧迫しているかを可視化します。

sudo rabbitmq-diagnostics memory_breakdown --unit MB
  • 主要な内訳項目:
    • queues: キューのメタデータやメモリ上のメッセージが占めるサイズ
    • binary: Erlangプロセスが保持するバイナリデータ(メッセージ本体など)
    • connection_readers / connection_writers: クライアント接続のバッファ
    • total: RabbitMQ全体のメモリ使用量
[AWS]Aurora PostgreSQLのチューニングでBedrockの性能を最大化
Amazon BedrockのバックエンドとしてAurora PostgreSQLを使用する際、ベクトル検索やRAGの性能を最大化するパラメータチューニング手法を解説。work_memやHNSWインデックス、並列処理の最適化により、低レイテンシかつ低コストなシステムを実現します。

4. メモリ閾値(High Watermark)の到達状況確認

設定したメモリ上限に対して、現在どの位置にいるかを確認します。

sudo rabbitmq-diagnostics status

出力内の Memory セクション(total, high_watermark, limit)で、メモリ制限に達してアラームが発火していないかを即座に把握できます。

5. リアルタイム監視(2秒ごとに自動更新)

コンソール上で数値を継続的にモニタリングしたい場合は watch コマンドと組み合わせます。

watch -n 2 \'sudo rabbitmqctl list_queues name messages messages_ready memory consumers\'

Q よくある質問 (FAQ)
Q. 特定のキューが消費しているメモリ量やタスク数を確認するにはどうすればよいですか?
A.
`rabbitmqctl` コマンドを使用して、キュー名(name)、メモリ(memory)、処理待ちタスク数(messages_ready)などの項目を指定して一覧表示することで確認できます。
Q. RabbitMQ全体のメモリが圧迫されている原因(内訳)を特定する方法は?
A.
`rabbitmq-diagnostics` コマンドを実行し、queues(キューデータ)やbinary(メッセージ本体などのバイナリデータ)などの内訳項目を分析することで、どの要素がメモリを消費しているかを特定できます。
Q. メモリ上限に達してアラームが発火していないかを確認するには?
A.
`rabbitmq-diagnostics` コマンド等の出力結果にある Memory セクションを確認し、現在の使用量(total)が閾値(high_watermark / limit)に達していないかをチェックします。

コメント

タイトルとURLをコピーしました