ハイブの現在の日付に等しいパーティション列

Question

パーティションを使用してHiveテーブルにデータをロードしようとしています。

コードは以下の通りである：

CREATE EXTERNAL TABLE URL(url STRING, clicks INT) 
COMMENT 'Unique Clicks per URL' 
PARTITIONED BY(dt STRING) 
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '\t' 
LINES TERMINATED BY '\n' 
STORED AS TEXTFILE 
LOCATION '/mypath/URL'; 

LOAD DATA INPATH '/inputpath/' INTO TABLE URL 
PARTITION (dt=date_format(CURRENT_TIMESTAMP, "yyyy.MM.dd HH:mm:ss")); 

私は次のエラーのgettinています：

FAILED: ParseException line 4:14 cannot recognize input near 
'date_format' '(' 'CURRENT_TIMESTAMP' in constant 

を私は

SET hive.exec.dynamic.partition.mode=nonstrict; 

を使用してみましたが、何も変わっていません。

なぜ機能しないのですか？ パーティションの列として現在の日付を設定するにはどうすればよいですか？

ありがとうございます。

ロレンツォ

Answer 1

なぜあなたはそれらの上に外部表を作成することができたときにファイルを移動しますか？
LOAD DATA INPATHは、「そのまま」のファイル（HDFSメタデータ操作）をテーブルの位置に移動するだけです。

明らかに日付であるときにパーティション列を文字列として定義するのはなぜですか？

CREATE EXTERNAL TABLE URL ... PARTITIONED BY(dt DATE) ... 

なぜあなたは、非ISO形式（YYYY.MM.DD）を使用しようとしていますか？ （

1.
は定数を使用します。パーティション情報がデータの一部ではないようですので
ISO日付形式を使用すると、3つのオプションを持っているYYYY-MM-DD

---

です関数を含む式は許されません）。

LOAD DATA INPATH '/inputpath/' INTO TABLE URL PARTITION (dt=date '2017-03-04'); 

2.
URLに似て、URL_STG、追加のテーブルを作成しますが、パーティションがなく、動的にパーティションを挿入するためにそれを使用。

set hive.exec.dynamic.partition.mode=nonstrict; 

insert into URL select *,current_date from URL_STG; 

3.

サプライ日CLI

hive --hivevar dt=$(date +"%Y-%m-%d") -e \ 
'LOAD DATA INPATH '\''/inputpath/'\'' INTO TABLE URL PARTITION (dt=date '\''${hivevar:dt}'\'')'