ノードファイルの行数

Question

ファイルの行数を取得する際にこのノードの機能に問題がありますが、正確な詳細を特定することはできませんでした。

function countFileLines(filePath){ 
    return new Promise((resolve, reject) => { 
    let lineCount = 0; 
    fs.createReadStream(filePath) 
    .on("data", (buffer) => { 
     buffer.forEach((chunk) => { 
     if (chunk === 10) lineCount++; 
     }); 
    }).on("end",() => { 
     resolve(lineCount); 
    }).on("error", reject); 
    }); 
}; 

ノード内のファイルの行数を取得する方法がありますか？比較のため

Answer 1

私は推測することができますが、buffer.forEach関数を呼び出すと、問題になる可能性があり、すべてのバイトについて比較を行っています。 VMがあなたのために改行をご覧いただくことがindexOfの使用を検討してください：

function countFileLines(filePath){ 
    return new Promise((resolve, reject) => { 
    let lineCount = 0; 
    fs.createReadStream(filePath) 
     .on("data", (buffer) => { 
     let idx = -1; 
     lineCount--; // Because the loop will run once for idx=-1 
     do { 
      idx = buffer.indexOf(10, idx+1); 
      lineCount++; 
     } while (idx !== -1); 
     }).on("end",() => { 
     resolve(lineCount); 
     }).on("error", reject); 
    }); 
}; 

何この解決策はありませんが、それは.indexOfを使用して、最初の改行の位置を見つけることです。 lineCountをインクリメントし、次の位置を見つけます。 .indexOfの2番目のパラメータは、改行の検索を開始する場所を示します。このようにして、バッファの大きな部分を飛び越えています。 whileループは改行ごとに1回プラス1回実行されます。

Nodeランタイムは、下位レベルで実装されているものを検索し、高速化する必要があります。

私のシステムでは、これは大きなファイル（111 MB）のバッファー長を超えてforループを実行した場合の約2倍の速さです。

Answer 2

function countFileLines(filePath){ 
    return new Promise((resolve, reject) => { 
    let lineCount = 0; 
    let i = 0; 
    fs.createReadStream(filePath) 
    .on("data", (buffer) => { 
     for (i = 0; i < buffer.length; ++i) { 
     if (buffer[i] == 10) lineCount++; 
     } 
    }).on("end",() => { 
     resolve(lineCount); 
    }).on("error", reject); 
    }); 
}; 

：

元：node index.js 2.38s user 0.29s system 98% cpu 2.713 total

modifed：node index2.js 0.18s user 0.04s system 96% cpu 0.225 total