nodejsからのエラスティックサーチへのデータのインポート

Question

公式のJavaScriptクライアントを使用して、Elasticsearchとのインターフェイスをとる単純なNodeJS RESTサービスを設定しています。私はnodejsを使用してデータをインポートしようとしていますが、1500レコード後に失敗しました。私はelasticsearchで200万のデータをインポートしたい

Answer 1

私は、nodejを使用して何百万というデータをインポートすることを考えました。

1. 我々はnodejsの非同期動作を管理するための部品
2. 利用非同期のロットにチャンクに必要なすべての最初の。
3. デフォルトでは、ノードjsのメモリ制限は512 MBですが、この場合は8 GB増やす必要があります。

   ノード--max-old-space-size = 8192 my-node-script.js＃8GBに増やす。

4. 今すぐ実行してください。