Cassandra Nodes Going Down

Question

Solrをインストールした3ノードのCassandraクラスタセットアップ（複製を2に設定）、各ノードにRHEL、32GB Ram、1TB HDD、およびDSE 4.8.3があります。私のノードではたくさんの書き込みが行われており、私のノードからは私のWebアプリケーションも読み込みます。

1. 3~4日ごとにすべてのノードがダウンすることがわかりました。私はすべてのノードを再起動しなければならず、次の3-4日まではうまく機能し、同じ問題が繰り返されます。サーバーのログを確認しましたが、サーバーがダウンしてもエラーは表示されません。私はなぜこれが起こっているのか理解できません。私のアプリケーションで
2. 、私はC＃カサンドラドライバを介してノードに接続したときに時々、私は次のようなエラーに

   Cassandra.NoHostAvailableExceptionを得る：「ノード-IP：クエリのためにしようとしたホストのいずれも試してみました（利用できません'：9042）Cassandra.Tasks.TaskHelper.WaitToComplete（タスクタスク、Int32タイムアウト）Cassandra.Tasks.TaskHelper.WaitToComplete [T]（Task``1タスク、Int32タイムアウト）at Cassandra.ControlConnection.Init（）at Cassandra .Cluster.Init（） `

しかし、私はOpsCenterのを確認したときに、ノードのどれもがダウンしていません。すべてのノードの状態が完全に正常に表示されます。これは運転手に問題がありますか？私は以前、Cassandra C＃ドライバのバージョン2.5.0をNugetからインストールしていましたが、今でもバージョン3.0.3にアップデートしましたが、このエラーは解決しません。

これについての助けに感謝します。前もって感謝します。

Answer 1

まだ行っていない場合は、実行してデフォルトにあなたのログレベルを設定することで、見てみたいことがあります。nodetool -h 192.168.XXX.XXX setlogginglevel org.apache.cassandra DEBUG

すべてのノード上のあなたの最初の問題は、ほとんどのOutOfMemory例外です。

2番目の問題では、GCの休止時間が非常に長くなる可能性が最も高いです。テロップ/var/log/cassandra/debug.logまたは/var/log/cassandra/system.logはヒントを与えるかもしれませんが、タイムスタンプを細心の注意を払っていない限り、通常問題を明らかにしません。このトラブルシューティングを行うための最善の方法は、あなたがGCのログは、あなたのjvm.optionsの設定で有効にしていることを確認することである休止時間に着目し、その後テールあなたのGCログ：

grep 'Total time for which application threads were stopped:' /var/log/cassandra/gc.log.1 | less

Unexpected exception during request; channel = [....] java.io.IOException: Error while read (....): Connection reset by peerエラーは、通常、ノード間でタイムアウト。コーディネータは、他のノードからの応答を待ってタイムアウトし、接続を閉じるためにTCP RSTパケットを送信する。