2011-07-31 18 views
0

ブーストトークンIDにバグがあります。確信はないけど。 testfile.hブーストT_CONTLINEトークンが機能しない

1 #define Funtion(x) X + \ 
    2      Y 
    3 
    4 #define MYVAR 100+\ 
    5    200 
http://www.boost.org/doc/libs/1_46_1/libs/wave/doc/token_ids.htmlサンプルテストのために

、私はテストファイルを持っている:「N \」を参照してください ブーストトークンイテレータは「\ \」が続いているT_CONTLINEトークンを検出することができません

そして、ここではT_CONTLINE

1 #include <iostream> 
    2 #include <fstream> 
    3 
    4 #include <boost/wave/cpplexer/cpp_lex_token.hpp> 
    5 #include <boost/wave/cpplexer/cpp_lex_iterator.hpp> 
    6 
    7 typedef boost::wave::cpplexer::lex_token<> token_type; 
    8 typedef boost::wave::cpplexer::lex_iterator<token_type> token_iterator; 
    9 typedef token_type::position_type position_type; 
10 
11 int main() 
12 { 
13 const char* infile = "testfile.h"; 
14 std::string instr; 
15 std::ifstream gmstream(infile); 
16 if(!gmstream.is_open()) { 
17  std::cerr << "Could not open file: "<< infile<<"\n"; 
18 } 
19 gmstream.unsetf(std::ios::skipws); 
20 instr = std::string(std::istreambuf_iterator<char>(gmstream.rdbuf()), 
21  std::istreambuf_iterator<char>()); 
22 
23 position_type pos(infile); 
24 token_iterator it = token_iterator(instr.begin(), instr.end(), pos, 
25  boost::wave::language_support(
26   boost::wave::support_cpp|boost::wave::support_option_long_long)); 
27 token_iterator end = token_iterator(); 
28 
29 boost::wave::token_id id = *it; 
30 
31 while(it!=end) { 
32  if(id == boost::wave::T_CONTLINE) { 
33  std::cout<<"Found Contline"; 
34  } 
35  ++it; 
36  id = *it; 
37 } 
38 return 0; 
39 } 

探しのプログラムである。しかし、私は、任意の出力を得ることはありません。

私はboost_1_47_1を使用してい

、とgcc-4.5

EDIT: は実際にあった同様のバグレポートは、ここに掲載:http://www.boost.org/doc/libs/1_47_0/libs/wave/ChangeLog

https://svn.boost.org/trac/boost/ticket/5569

は、変更履歴を参照してください。

このバグは、最新のブースト1.47.0で解決されると報告されています。最新のブースト1.47.0をインストールしましたが、それでも問題は解決しましたイン。

+0

バグがあると思われます。 –

答えて

1

はい、このトークンはイテレータレベルでは公開されません。処理の早い段階で内部的に処理されます。バグではありませんが、期待される動作です。ドキュメントにメモを追加します。

+0

ありがとう...しかし私はT_CONTLINEを特定する必要があります。どのように私はこれを行うのですか?問題は、トークンを文字列ストリームに読み込んで別のファイルに書き直し、すべてのT_CONTLINEが失われ、スペースに置き換えられたときです。マクロのフォーマットが悪影響を受けるためです。 –

+0

私はWave:support_option_emit_contnewlinesに新しいフラグを追加しました。これにより、T_CONTLINEトークンがライブラリによって発行されます。唯一の注意点は、これが現在SLexカスタムレクサーモジュールでのみサポートされていることです。今のところそれを使用する必要があります。 – hkaiser

+0

私は更新を見てくれてありがとう。私は今boost_waveを使用しているので、私はSLexに切り替えることは時間がかかると思います。 boost_waveのレクサーも更新する可能性はありますか? –