chunks

0熱

1答えて

C＃を使用したフラットファイルからSQLテーブルへのチャンク/バッチのデータのインポート

巨大なデータを持つFLATファイル（TARABITES内）からチャンク/バッチにデータをロードしたい。 1-10000,10001-20000などのようなチャンクをステージングテーブルにロードする場合は、ステージングテーブルのメモリが制限されています。データがステージングテーブルにロードされると、データを最終テーブルにロードします。いくつかのC＃スクリプトでは、id番号からTO id番号に変数

1熱

1答えて

HTTP範囲要求の開始と終了のバイト（nodejs + mongodb）を決定する方法

HTTP範囲要求の開始&終了バイトを判別することが可能か、ブラウザにどこから開始して何らかのユーザー定義されたチャンクサイズ程度である。データベースにファイルがあり、複数のチャンクに分割されています。各チャンクは2 MBです。例えば、 20MBファイル=> 10チャンクブラウザがファイル（ビデオファイル）のダウンロードを開始すると、私はクロムを調べた後、最初に'range=bytes 0-'

2熱

1答えて

Pythonデータフレームでデータをチャンクで読み取る方法は？

チャンク内のファイルfをデータフレームに読み込みたい。ここで私が使用したコードの一部です。 for i in range(0, maxline, chunksize): df = pandas.read_csv(f,sep=',', nrows=chunksize, skiprows=i) df.to_sql(member, engine, if_exists='append',index=

0熱

1答えて

マルチプロセッシングプールはチャンクでパフォーマンスが悪くなります

私はPythonマルチプロセッシングプールのパフォーマンスでいくつかの奇妙な動作があります。次のコードでは、dataは、リサイズされる数百万の画像のndarrayであり、chunks_listは、dataのチャンクです。私はpool = Pool(14)を使用します。機能resize_imagesは一度に画像のグループをサイズ変更し、resize_imageは画像をサイズ変更します。次のコード：

0熱

1答えて

rmarkdownウェブサイトでグローバルチャンクオプションを指定する方法は？

複数のrmarkdownファイルを使用してwebsiteを作成することは可能です。各rmarkdownファイルのために、私たちはのようないくつかのグローバルオプションを指定することができます ```{r setup, include=FALSE} knitr::opts_chunk$set(echo = FALSE, message=FALSE, warning=FALSE) ``` を私

1熱

1答えて

画像にノードを書き込むノード

画像データのチャンクを画像に変換したい。しかし、私は成功するように見えることはできません。これは、変換したいチャンクのタイプです。画像/ JPEG のContent-Length：コンテンツタイプを--ThisString JFIF（＃（## - +（0 } 1AQa「Q2！＃1 BR $の3BR ％&「（）* 456789：CDEFGHIJSTUVWXYZcdefghijstuvwxyz w

1熱

1答えて

私のコードでcsvを反復処理すると、パンダが最初のチャンクをスキップする理由

私は、パンダのチャンク機能を使って繰り返し読み込んだ非常に大きなCSVファイルを持っています。問題は：例えばchunksize = 2の場合、最初の2行をスキップし、最初のチャンクは3-4行になります。 I = 4 NROWSとCSVを読めばチャンク= 2は私を取得する最初の行3および4は、5及び6、... と同じファイルをチャンク化しながら、基本的に、私は最初の4行を得ます #1. Read w

0熱

1答えて

Itextで指定されたフォントのList Symbolが占有する空白/サイズを見つける方法Java

Listに置かれた段落を含むpdfを生成しようとしています。段落に番号を付けるためにリストシンボルを使用します。今度はスペース/サイズがリストシンボルによって占有されているのを見つける必要があります。それ、どうやったら出来るの？リストの自動インデント機能は、パラシンボルの次の行がインデントされるようにリストシンボルのスペースを計算します。リスト記号にスペース/インデントが必要です。また、これの測

1熱

2答えて

PythonでnetCDF4のチャンクサイズを設定するには？

netCDF4ライブラリのデフォルトチャンク設定を見ることができますが、チャンクサイズを変更する方法はわかりません。 from netCDF4 import Dataset volcgrp = Dataset('datasets/volcano.nc', 'r') data = volcgrp.variables['abso4'] print data.shape print data.

0熱

1答えて

Gnome GIOを使用してファイルを非ブロック方式でチャンクで読み取るにはどうすればよいですか？

GInputStreamをノンブロッキングとチャンクごとに処理する正しい方法（GIO/Glib/GTK/Gnome）は何ですか？私はlibsoupを通してダウンロードし、データストリームをチャンクで処理し、他のアクションを並行して実行するアプリケーションを持っています。私はsoup_session_send_finishから受信GInputStream（上g_input_stream_read_