VB.NetのSQLiteデータベースにExcelデータを効率的にインポートする

Question

SQLiteバックエンドにデータを格納するVB.Netアプリケーションを作成しています。データは、ユーザーがインポートできるExcelブックに入っています。各ワークブックには、改訂されて新しいテーブルにインポートされるワークシート（約30,000行）があります。これを行う最も効率的な方法は何ですか？

私は現在、Excelから2D配列に全範囲を読み込んでいます。この配列の行をループし、各行を1000行ごとに実行される長いSQL文に追加します。しかし、これは配列ビットをループすることとSQLiteのステップに進むことの両方で痛みを伴います。私は助けることができませんが、これを行うより効率的な手段がなければならないと考える。

おかげで、以下

コード： 「は、第1 Excel.Worksheet

としてExcel.Workbook 薄暗いxlWorkSheetなどの新しいまずExcel.Application 点心xlWorkBookとしてのXLS reformater帳を開いて、私たちのデータに 点心xlAppを読みます

xlWorkBook = xlApp.Workbooks.Open(strFile) 
    xlWorkSheet = xlWorkBook.Worksheets("ToDSS") 

    Dim r As Excel.Range = xlWorkSheet.UsedRange 
    Dim array(,) As Object = r.Value(Excel.XlRangeValueDataType.xlRangeValueDefault) 

    xlWorkBook.Close() 
    xlApp.Quit() 

    releaseObject(xlApp) 
    releaseObject(xlWorkBook) 
    releaseObject(xlWorkSheet) 

    SQLconnect.Open() 
    SQLcommand = SQLconnect.CreateCommand 

    'now loop through the rows inserting each into the db 

    Dim curDate As Date 

    strSQL = "" 
    Dim batch As Integer = 0 

    For row As Integer = 16 To array.GetUpperBound(0) 
     strSQL += "INSERT INTO scenario_" & strScenarioName & " VALUES ('" 
     curDate = array(row, 1) 
     strSQL += curDate.ToString("yyyy'-'MM'-'dd") + "'" 

     For col = 2 To 30 
      strSQL += ", " & array(row, col) 

     Next 
     strSQL += ");" & vbCrLf 

     If batch > 1000 Or row = array.GetUpperBound(0) Then 
      Debug.Print(Str(row)) 
      SQLcommand.CommandText = strSQL 
      SQLcommand.ExecuteNonQuery() 
      Debug.Print("pushed") 
      strSQL = "" 
      batch = 0 
     Else 
      batch += 1 
     End If 

    Next 
    SQLcommand.Dispose() 
    SQLconnect.Close() 

Answer 1

csv形式にエクスポートし、バルクロードを使用します。

Answer 2

おそらくわずかですが、ExcelではなくAccessにファイルをインポートしてからSQLiteにエクスポートすることができます。

SQLiteのためのODBCドライバがあります：

http://www.ch-werner.de/sqliteodbc/

あなたはSQLiteのにAccessからエクスポートできることを使用します。 GUIから実行する例を示します。私の基本的な前提は、プログラム可能であるか、あるいは（おそらくVBAから）自動化することができるということです。

http://support.microsoft.com/kb/200427

私はそれはあなたに、最小限の書式設定オプションを提供しますが、それはそれをやってのではなく、クリーン（および即時）の方法であるべきと仮定します。ドライバはオープンソースなので、C言語で十分に堪能であれば拡張することができます。