複数の消費者が同時に消費できますか？

Question

私はカフカを初めて利用しています。私は、複数の消費者がトピックのデータを同時に消費して同時に処理できるか、または消費されてバッチ処理されるかどうかを知りたがっていますか？

Answer 1

Kafka Consumersグループ自体がコンシューマグループ名であり、トピックにパブリッシュされた各レコードは、購読する各コンシューマグループ内の1つのコンシューマインスタンスに配信されます。コンシューマ・インスタンスは、別々のプロセスまたは別々のマシンに置くことができます。

すべてのコンシューマインスタンスが同じコンシューマグループを持つ場合、レコードはコンシューマインスタンスに対して効果的に負荷分散されます。

すべてのコンシューマインスタンスが異なるコンシューマグループを持つ場合、各レコードはすべてのコンシューマプロセスにブロードキャストされます。

データの処理は、お客様の要件に基づいて同時にまたはバッチで実行できます。