DataFrameカラムとしてScipyの疎な行列

Question

私はpandas DataFrameオブジェクトに基づいてツーリングを開発しています。私は、それを行ごとにdtype（ 'O'）のリスト/ numpy配列に変換することなく、Scipyの疎な行列をDataFrameの列として保持したいと考えています。

パンダは、行列をスカラーとして扱い、インデックスを追加することを提案しているため、以下のスニペットは機能しません。行列の行インデックスにpd.RangeIndexを渡すと、行列はデータフレームのすべての行について繰り返されます（pandasはスカラーであるとみなします）。

df = pd.DataFrame(dict(X=list(ma))) 

しかし、これは行方向CSRにマトリックスを切断する1行の各行列：

ma = scipy.sparse.rand(10, 100, 0.1, 'csr', dtype=np.float64) 
df = pd.DataFrame(dict(X=ma)) 

これは、作業が行います。それで、元のマトリックスで作業したいと思うたびにvstackする必要があります。

任意のポインタ？私はdtype（ 'O'）を持っていると思われるpd.SeriesオブジェクトにCSRマトリックスをラップしようとしましたが、私は基底のデータがたくさんの配列などであると仮定しています。

Answer 1

疎のデータフレームまたはデータ機能があります。それはまだ実験的です。私は、それとscipyの疎な行列の間で前後に変換することに関するいくつかの質問に答えました。サイドバーから

：

Populate a Pandas SparseDataFrame from a SciPy Sparse Coo Matrix

私は疎行列はパンダフレームに追加することができる方法が表示されないように、特殊なパンダの構造を持ちません。スパース行列の内部構造はあまりにも異なっています。最初は、numpy配列のサブクラスではありません。

csrマトリックスは、データが3つのアレイに含まれるオブジェクトです。ma.dataおよびma.indicesは、配列の非ゼロ要素ごとに1つの値を持つ1d配列です。 ma.indptrには、行列の各行の値があります。

list(ma)は無意味です。 ma.toarray()は、同じデータを持つ2次元配列を生成し、それらのゼロもすべて埋められます。

その他の疎行列のフォーマットは、他の構造において、データを格納する - coo 3つの等しい長配列、lilためのリストの二つのリスト、及びdokの辞書。