現在、私のセンサー読み取りデータをAzure BlobストレージからSQLデータベースに移動中です。私は複数の.csvファイルを持っており、それらのファイルには日付を保持するさまざまな列があります(形式:25/4/2017)、time、sensor_location、およびsensor_readings。 私の質問; Logic Appを使用してそれぞれの列に応じてデータを保存する場合、どのような手順を踏む必要がありますか?どのように最初のファイルデータの後の行に2番目のファイルデータをプッシュするのですか?ありがとうBLOBからSQLデータベースへのデータの移動
答えて
あなたのデータをインポートするためのスクリプト(mysqlが行うことができる高水準言語、Python、PHP、nodejsなど)を書くか、sequelproのようなmysqlクライアントを使用する必要がありますhttps://www.sequelpro.com/ csvファイルをインポートします。ここで
は、PHPでMySQLにデータを挿入する方法についてのリンクです: http://php.net/manual/en/pdo.prepared-statements.php あなたがして、csvファイルを読むことができます:
$contents = file_get_contents('filename.csv');
$lines = explode("\n", $contents);
foreach($lines as $line) { ...
// insert all rows to mysql here
あなたの提案のおかげでありがとう。しかし、私はAzureプラットフォームでPHPを使うことはできないと思う。 – Dein
あなたがAzure Data Factoryを試してみてください。 BLOBデータをSQL hereにコピーするチュートリアルがあります。
スケジュールで実行するように設定することもできます。
ありがとう。しかし、ADFが実行されるたびに、ブロブ内のすべてのデータが取り出され、テーブルに格納されます。これは時間がかかり、多くの処理能力を必要とします。現在のデータを前のデータの下に追加するか、ブロブ内に追加された新しいデータを単にプルして保存するだけです。 – Dein
ストレージアカウントの一部をコピーする自由があります。たとえば、入力ブロブが年/月/日形式で構成されている場合は、動的式を使用して、コピーする現在または過去の日のみを選択できます。最も簡単なのはおそらくDFを作って遊んで、それがあなたのために働くかどうかを確認することです。しかし、私は同意する、ストレージアカウント全体をコピーするたびに意味をなさない:) – Niels
- 1. MS SQL ServerからMySQLへのBLOBデータの移行
- 2. hdfsからsqlへデータを移動
- 3. Azureのあるデータベースから別のデータベースへのデータの移動
- 4. データベースD1のT1からデータベースD2のT1へのデータ移動
- 5. SPからSQLへの添付ファイルの移行BLOB
- 6. NetezzaからSQL Serverへのデータ移行
- 7. 列から行へのSQLの移動
- 8. あるデータベースから別のデータベースへのデータの移行
- 9. マルチノードカサンドラクラスタからシングルノードインスタンスへのデータ移動
- 10. SQL Server CEからSQL Serverデータベースへの移行
- 11. MsアクセスからDerbyデータベースへの移行方法またはMy SQLからDerbyデータベースへのデータの移行方法
- 12. データベースの移植性(SQLサーバーからmysql、postgresqlへ)
- 13. Pentahoを使用したSQL/OracleからCassandraへのデータの移動
- 14. Azure SQLデータベースからAzure SQLデータウェアハウスへのETLデータへの推奨ツール
- 15. LINQからSQLへの移動 - > LINQからエンティティへの移動時に注意すること
- 16. データベースからテキストボックスへのデータ
- 17. データベースからカスタムリストへのデータ
- 18. MySQLデータベースからSQL ServerデータベースへのSqlBulkCopy
- 19. mysqlからSQL Server 2005へのutf-8データの移行
- 20. SQL - 1つのポートフォリオから別のポートフォリオへの移動
- 21. SQL Serever Express 2008 R2からMySQL 5へのデータ移行
- 22. AccessデータベースからSharePoint 2007への移行
- 23. django sqliteデータベースからpostgresqlへの移行
- 24. SQLデータベースからHTMLテーブルへのヘッダーとデータのインポート
- 25. MS SQLデータベースからロータスノーツデータベースへのデータの取得
- 26. XMLファイルからSQLデータベースへのXMLデータのインポート
- 27. InformixからMicrosoft SQL Server 2008への移行、スキーマとデータの移行は?
- 28. Crystal ReportsからSQL Server Management StudioへのIFステートメントの移動
- 29. 複数のテーブルから別のデータベースにデータ・ステートメントを移動
- 30. すべてのデータをリストボックスからデータベース内のテーブルに移動
Azure Data Factory - さまざまなソース間でデータをコピーし、好きなように変換できるAzureネイティブサービスです。 –
ありがとう@TomaszTuczapski。しかし、私はADFに修正済み/新しく追加されたデータをSQL DBにコピーするように指示する方法はわかりません。 – Dein