dictからpandasデータフレーム

Question

データフレームに入れ子にしたjson dictを入れるコードがあります。 データフレームを作成する前に、numpy配列 をストレージに使用する必要があるかどうかは、あまり効率的ではありません。 Dictのサイズは100万、itemはJSON文字列です。

ALL=dict() 
    ALL[0]= """{id1: 'Big_JSON' }""" 
    for k_id, dd in ALL.items() : 

    ii+=1 
    if ii > -1 : 
    dfi= pd.io.json.json_normalize(dd) 

    if ii == 0 : 
     ALL_df= dfi  
    else: 
     ALL_df= pd.concat((ALL_df, dfi), axis=0)  
     print ii, 

データフレームに変換する方法はありますか？

Answer 1

代わりに、同時にすべてのdictsを変換してみてください非効率的連結を使用しての

：

ALL_df = pd.io.json.json_normalize(ALL.values())