Pandasチャンクの行数を取得する方法は？

Question

私はチャンクを繰り返して巨大なcsvファイルを読んでいます。現在処理されているチャンクのサイズはどのように取得できますか？特に、最後のチャンクは、パラメータchunksizeで定義された数よりも少ない行数を持つことがあります。

reader = pd.read_table('myFile.csv', sep=';', chunksize=100) 

Answer 1

あなたはDataFrameの長さをチェックする必要があります。

for x in reader: 
    print (len(x.index)) 
    print (len(x)) 
    print (x.shape[0])