テキストファイルのデータベースへの変換はどこから始まりますか？

Question

私は現在、テキスト情報を照会するサイトを開発しようとしています。私はすでに必要なすべてのテキストファイルを持っていますが、私はデータベースに全く触れておらず、どこから始めるべきか分かりません。

私はテキストファイルを解析してデータベースに挿入する必要があると知っていますが、オンラインで見つかった情報のほとんどは、ある種のSQLサーバーをオンラインにすることを指しています。どのようにテキストファイルを解析してデータベースに挿入すればいいのでしょうか？その代わりに、それらをウェブサイトに移植しますか？私は完全に失われています）：

私はJavaとPythonで多少経験があり、CSS/HTMLに精通しています。

Answer 1

これは大きな仕事（多くのデータ）ですか、それとも初めてですか？

• 、MySQL Workbench
• Learn SQLを取得いくつかのテーブルを作成し、良い主キーを選択してください。
• あなたは多くのデータを持っている場合についてJDBC and prepared statements

はJasper/Talend ETL考えるが、私はそれはやり過ぎだと思いますあなたは本当にたくさんの操作を持っている場合LOAD DATA INFILEかを行うには、あなたのファイルを操作考えるご覧ください。

---

あなたのコメントを読んだ後、私はいくつかのスクリプトを作成しました。 mysqlクライアントを持つまたは作業台

CREATE DATABASE IF NOT EXISTS `test`; 
USE test; 

と

ログインは、私はすべてのことをテストしていませんが、うまくいけば、それはであなたを指すこれら

DROP TABLE IF EXISTS `test`.`tempjop`; 
CREATE TABLE `test`.`tempjop` (
    `fullname` VARCHAR(45) NOT NULL, 
    `description` TEXT NOT NULL 
); 

-- Example 
-- INSERT INTO `test`.`tempjop` (`fullname`, `description`) VALUES ("JOHN DOE", "John is a programmer"); 


LOAD DATA INFILE 'C:/Temp/Job.txt' INTO TABLE tempjop 
    FIELDS 
     TERMINATED BY ':' OPTIONALLY ENCLOSED BY '"' 
    LINES 
     TERMINATED BY '\r\n'; 

SELECT 
    * 
FROM 
    `tempjop` 
; 

UPDATE 
    `user` AS U, 
    `tempjop` AS J 
SET 
    U.jobdescription = J.description 
WHERE 
    J.fullname = CONCAT(CONCAT(U.firstname, ' '), U.lastname) 
    -- If you need first names only like 'MARY' uncomment this 
    -- OR J.fullname = U.firstname; 
; 

SELECT * FROM `user`; 

DROP TABLE IF EXISTS `tempjop`; 

そして、これら

DROP TABLE IF EXISTS `test`.`user`; 
CREATE TABLE `test`.`user` (
    `userid` INT NOT NULL AUTO_INCREMENT , 
    `firstname` VARCHAR(45) NOT NULL , 
    `lastname` VARCHAR(45) NOT NULL , 
    `jobdescription` TEXT NULL, 
    `childhooddescription` TEXT NULL, 
    PRIMARY KEY (`userid`) 
); 


DROP TABLE IF EXISTS `test`.`tempuser`; 
CREATE TABLE `test`.`tempuser` (
    `fullname` VARCHAR(90) NOT NULL, 
    PRIMARY KEY (`fullname`) 
); 

-- Examples you can use 
-- INSERT INTO `test`.`user` (`firstname`,`lastname`) VALUES ("bob","jones"); 
-- INSERT INTO `test`.`tempuser` (`fullname`) VALUES ("JOHN DOE"); 

INSERT INTO `test`.`user`(
    `firstname`, 
    `lastname` 
) 
SELECT 
    SUBSTRING_INDEX(SUBSTRING_INDEX(fullname, ' ', 1), ' ', -1) AS firstname, 
    SUBSTRING_INDEX(SUBSTRING_INDEX(fullname, ' ', 2), ' ', -1) AS lastname 
FROM 
    tempuser; 


SELECT * FROM `user`; 

DROP TABLE IF EXISTS `tempuser`; 

をお試しください右方向。

幸運。

Answer 2

MySQLのfull-text searchがまず試してみてください。あなたが必要とするものに十分に十分かもしれません。おそらく必要なものは、this exampleをテンプレートとして使用してください。

要するに、ファイルをまったく解析しないことがあります。ドキュメントのタイトルとドキュメントの本文を特定し、それらを2つの別々のフィールドとしてテーブル行に挿入します。書式設定やその他のメタコンテンツがある場合は、挿入前にそれらを削除してください。