ValueError：配列が大きすぎます

Question

次のコードを使用して2つのExcelファイルをマージしようとしましたが、 "ValueError：配列が大きすぎます; arr.size * arr.dtype.itemsizeが最大サイズより大きくなりました"というエラーが発生しました。

import pandas as pd 

file1 = pd.read_excel("file1.xlsx") 
file2 = pd.read_excel("file2.xlsx") 

file3 = file1.merge(file2, on="Input E-mail", how="outer") 

file3.to_excel("merged1.xlsx") 

ファイルサイズは〜100メガバイトは+〜100メガバイト、利用可能なRAMはあなたの結果のデータフレームは、あなたの二つの入力のものよりもはるかに大きくすることができる（16ギガバイトの）9ギガバイト

Answer 1

です。簡単な例：

import pandas as pd 

values = pd.DataFrame({"id": [1,1,1,1], "value": ["a", "b", "c", "d"]}) 

users = pd.DataFrame({"id": [1,1,1], "users": ["Amy", "Bob", "Dan"]}) 

big_table = pd.merge(users, values, how="outer") 

print big_table 

結果：

 id users value 
0  1 Amy  a 
1  1 Amy  b 
2  1 Amy  c 
3  1 Amy  d 
4  1 Bob  a 
5  1 Bob  b 
6  1 Bob  c 
7  1 Bob  d 
8  1 Dan  a 
9  1 Dan  b 
10 1 Dan  c 
11 1 Dan  d