複数のファイルをC++で連続してストリームする

Question

私の質問はthisと似ていますが、この問題のC++リファレンスは見つかりませんでした。

読み込みおよび処理する大きなファイルのリストがあります。前のファイルの最後に次のファイルを自動的に開く、ファイルからデータを1つずつ取得する入力ストリームを作成する最善の方法は何ですか？このストリームは、ファイル境界を越えて可変サイズのブロックを順次読み取る処理関数に渡されます。

Answer 1

あなたがしたいことは、std::basic_streambufから継承するタイプを提供することです。多くの暗黙のvirtualメンバ関数があり、そのうちの関連するものはshowmanyc(),underflow()、uflow()、およびxsgetn()です。オーバフロー時に、リスト内の次のファイル（もしあれば）を自動的に開くように、それらをオーバーロードする必要があります。

ここに実装例があります。私たちは、std::filebufとして機能し、ちょうど私たちが読む必要がある次のファイルのdeque<string>保つ：

multifilebuf mfb{"file1", "file2", "file3"}; 

std::istream is(&mfb); 
std::string word; 
while (is >> word) { 
    // transaparently read words from all the files 
} 

Answer 2

簡単な解決策として、boostの結合を使用してファイルのistreamイテレータの範囲を指定します。私は現在のC++ライブラリで同様の機能を認識していませんが、おそらくTS Rangesv3に存在します。

あなた自身でも書くことができます：自分で書くことは完全に可能です。

私はこれを「平坦化」入力専用イテレータとして記述します。イテレータは、各範囲の内容を順に繰り返し処理する範囲の範囲にわたってイテレータです。イテレータは、将来の範囲の範囲を追跡し、現在の要素のイテレータを保持します。

Hereは、書かなければならないコードの大きさのアイデアを与える非常に単純なジッパーイテレータです（ジップイテレータは別のコンセプトです。これはfor(:)ループにのみ適した単純なものです）。

これはC++ 14を使用してそれを行うかもしれない方法のスケッチです：

template<class It> 
struct range_t { 
    It b{}; 
    It e{}; 
    It begin() const { return b; } 
    It end() const { return e; } 
    bool empty() const { return begin()==end(); } 
}; 

template<class It> 
struct range_of_range_t { 
    std::deque<range_t<It>> ranges; 
    It cur; 
    friend bool operator==(range_of_range_t const& lhs, range_of_range_t const& rhs) { 
    return lhs.cur==rhs.cur; 
    } 
    friend bool operator!=(range_of_range_t const& lhs, range_of_range_t const& rhs) { 
    return !(lhs==rhs); 
    } 
    void operator++(){ 
    ++cur; 
    if (ranges.front().end() == cur) { 
     next_range(); 
    } 
    } 
    void next_range() { 
    while(ranges.size() > 1) { 
     ranges.pop_front(); 
     if (ranges.front().empty()) continue; 
     cur = ranges.front().begin(); 
     break; 
    } 
    } 
    decltype(auto) operator*() const { 
    return *cur; 
    } 
    range_of_range_t(std::deque<range_t<It>> in): 
    ranges(std::move(in)), 
    cur{} 
    { 
    // easy way to find the starting cur: 
    ranges.push_front({}); 
    next_range(); 
    } 
}; 

それはイテレータの公理のすべてをサポートしなければならないという点で、イテレータは、作業が必要。そして、イテレータを正しく終了させることは少しの作業です。

これは、ストレーマではなく、イテレータです。