Python、多くの外部データに依存する大きな関数を構成する方法

Question

質問：多くの外部データに依存する大きな関数をどのように構成するか。クラスを宣言し、それらの外部データを含める必要がありますか？大きな機能とそのデータを1つのファイルに保存する必要がありますか？または、それを行うためのより良い方法がありますか？最も計算効率の高い方法は何ですか？どのようなpythonic、推奨された方法は何ですか？

私は解析するログファイルを持っており、ログファイルには多くの形式の文字列が含まれています。すべての可能なフォーマットを処理するparseLine（inputStr）関数を書いた。 parseLine（）関数は多くのプリコンパイルされた正規表現と検索のための非常に大きな辞書を必要とします。その後、mytimeCriteriaを決める、私のメインのコードでは

regex0 = re.compile('foo') 
regex1 = re.compile('bar') 
# and many more regexes 

set0 = {'f', '0'} 
set1 = {'b', 'a'} # could be a big set contains 10s of strings 
# and many more sets 

def parseLine(inputString, inputDictionary, inputTimeCriteria): 
    # pseduo code: 
    # use regex0 to extract date info in inputString 
    # check if date within inputTimeCriteria 
    # use more of previous declared regexes and sets to extract more info, 
    #  branch out to different routines to use more regexes and sets to extract more info 
    # finally use inputDictionary to look up the meaning of extracted info  
    # return results in some data structure 

、私はparseLineFile.py
ビルドmyDictionaryをインポートすると：私は私のparseLineFile.pyがどのように見える

parseLineFile.py

ファイルにparseLine（）関数を保持しましたparseLine（）を使用してファイルを1行ずつ解析します。

私は自分の質問がスタックオーバーフローicではないと感じていますが、狭い/具体的な質問をどのようにしなければならないかコメントしておきたいなら、それは素晴らしいことです！私の問題にどうやってアプローチするかについても言及してください。

Answer 1

それは特にあなたがこの特定の機能のために何をすべきか、あなたを伝えるのは難しいですが、大きな機能を組織に関してはいくつかのヒント：

まず、条件文が独自の機能に移動することができるものを識別します。たとえば、あなたがこのコードを持っているとしましょう：

if 'foo' in inputString: 
    line = regex() 
    line = do_something_else() 
elif 'bar' in inputString 
    line = regex() 
    line = do_something_a_little_different() 

あなたが簡単にあなたがここに何ができる1つの抽象化を見ることができ、そしてそれはあなたがparseFooとparseBarを作成しますので、独自の機能を各ifブロック内の機能を移動することです行を取り、期待値を返す関数

これの主な利点は、ユニットテストに非常に簡単な機能が追加されました。私は気をつけ

他のものは以下のとおりです。

• はあなたが条件文の多くのネスティングを行いますか？精神的に翌日の機能をスキャンして、私はまだ非常に簡単にそれを得るかどうかを確認機能
• に、あなたは異なる入力を自分で繰り返している場合は
• ネスト減らす抽出するために、早期の機能とreturnに抽出します。そうでない場合は、より小さなビットに抽出します。

とにかく、あなたからのより多くの情報が理想的ですが、あなたが始めるのに役立つことを願っています！