Node.js - 検索インデックスを呼び出すときにメモリが不足する

Question

私はcsvファイルから読み込み、elasticsearchインデックスにデータを挿入しようとしています。以下のように、私はreadstreamを使い、 "data"イベントをリッスンします。私の問題は、私はすぐにこのアプローチを使用してメモリが不足しているということです。私はそれがelasticsearchモジュール（弾力性）が毎回RESTを作り、そのような要求の数が増えていることを推測しています。

私はかなり新しいので、これを修正してメモリ不足にならない方法がありますか？どんな一般的なパターンやテクニックですか？

stream.on('data', function (doc) { 
    // create a json from doc 
    client.index('entities', 'command', json, function (err, res) { 
     console.log(res); 
    }); 
} 

Answer 1

データの取得時にストリームを一時停止し、要求が完了したらストリームを再開します。あなたのコードについて

stream.on('data', function (doc) { 
    stream.pause(); 
    // create a json from doc 
    client.index('entities', 'command', json, function (err, res) { 
     stream.resume(); 
     console.log(res); 
    }); 
} 

奇妙なことは、あなたがその関数内のどこdocを使用していないです。私はあなたのコード全体を投稿していないと思います。