Haskell FFIメモリ割り当てパフォーマンスの問題

Question

私はFFIからCまでの大量のデータ（〜100MB）をCプログラムに送ります。文字列のリストだけです。しかし、私が使用した方法のすべては、不合理な時間（約10秒）かかると思われます。プロファイリングすると、時間がかかる実際のメモリ割り当てのように見えます。私が試した：

• は、通常の文字列としてバイト文字列に（newCString）
• 変換文字のベクトル（unsafeWith >>= withForeignPtr ...）

最速の方法にはどのようなものですから（unsafeUseAsCString）

変換を送りますC FFIを介してデータを送信しますか？

Answer 1

Reid Bartonがコメントで言ったように、100MBの文字列があれば、あなたが何をしていても、あなたの割り当てはひどくなります。

あなたのスローダウンは、FFIのものではなく、100MBの文字列から始まるものではありません。

Answer 2

newAlignedPinnedByteArrayで割り当てられたMutableByteArrayを使用してカスタムデータ型を作成し、mutableByteArrayContentsでCに渡すことができるものに変わっているのがおそらくあります。

あなたが接続しているC APIを書き直すことができるのであれば、C関数にFunPtrを与えて、一度に扱うHaskellデータの妥当なサイズのチャンクを渡すことです。