2
Google Cloudデータラボを使用しています。%% storage読み取りコマンドを使用して大きなファイル(2,000,000行)をtext
変数に読み込み、BytesIOを使用してpandasデータフレームに処理する必要があります。df_new=pd.read_csv(BytesIO(text))
Pythonで使用した後にバッファスペースを解放しますか?
これで変数やその内容が周囲にある必要はありません(これ以上の処理はdf_new
で行われます)どうすれば削除できますか(text
)、メモリを解放するにはどうすればいいですか? 200万レコードのデータセット...)