2017-06-02 5 views
1

私は、zipファイルから大きなCSVをロードしようとすると、実行ログは私に次のエラーを与える:Cloudconnect CSVバッファサイズ

----------------------------------------- Error details ------------------------------------------ 
    Component [Clientes:CLIENTES1] finished with status ERROR. 
    The size of data buffer is only 100663296. Set appropriate parameter in defaultProperties file. 
-------------------------------------------------------------------------------------------------- 

がどのように私はデフォルトプロパティに適切なパラメータがファイルを設定することができますか?

私はこの linkを試してみましたが、私のcloudconnect実行構成ページがリンクとは異なります。言ったように私はパラメータファイルを作成し、正しい値で追加のパラメータを埋めてきた enter image description here

チュートリアル(コード怒鳴ります)同じエラーが画面に表示されます。 DEFAULT_INTERNAL_IO_BUFFER_SIZE = 200000000

どのように私はこの問題を解決することができます

Name: -config; Value: new_buffer_size.txt 

new_buffer_size.txt内容は、ちょうどこのラインを持っていますか?私は世界が爆発する前にこれを解決する必要があります。

答えて

1

CloudConnectはGoodDataクラウドワーカーで実行できるETLを開発するように設計されているため、この場合のようにいくつかの低レベル設定を上回ります。正当な唯一の方法は、現在の設定でデータを処理できるようにETLを変更することです。 docsに関しては、参照された記事は古くなっています。 GoodDataドキュメントチームは、ドキュメントリファクタリングを準備しているかどうかを認識しています。

注:CloudConnectはJavlinのClover ETLを使用しているため、低レベル(UIなし)の問題を解決する方法を見つけるためにフォーラムを確認してください。ローカルマシン上のデータ処理のためにのみ動作します。

関連する問題