JavaScriptコードからトークンを取得

Question

JavaScript/Nodeで簡単なインタープリタを作成したいと思います。私は、トークンを生成するときには障害があります。示されているように

var code = 'if (a > 2 && b<4) c = 10;'; 

code.match(/\W+/g) 
// [" (", " > ", " && ", "<", ") ", ";"] 

code.match(/\w+/g) 
// ["if", "a", "2", "b", "4", "elo"] 

、W+は私が特殊文字を取得することができますし、w+は私が単語を取得することができます。私は以下のように1列のもの、何かを取得する方法を疑問に思う：示されているように

// ["if", "(", "a", ">", "2", "&&", "b", "<", "4", ")", "c", "=", "10", ";"] 

Answer 1

、W +は私が特殊文字を取得することができますし、+ wは私が単語を取得することができます。 私は1つのアレイ、以下のようなものでそれらを取得する方法を疑問に思う：単にこの

code.match(/\w+|\W+/g) 

が

["if", " (", "a", " > ", "2", " && ", "b", "<", "4", ") ", "c", " = ", "10", ";"] 

として出力を与え、これは、同様のトークンをトリミングしますしてみてください

を

var tokens = code.match(/\w+|\W+/g).map(function(value){return value.trim()});