hive

1熱

1答えて

私はSpark-2.2を使用しています。私はSparkのバケツをPocingしています。私はバケット表を作成しましたは、ここdesc formatted my_bucketed_tbl出力です： +--------------------+--------------------+-------+ | col_name| data_type|comment| +----------

0熱

1答えて

指定されたパーティションパスがない場合、SPARK SQLが失敗する

EMRでHive Metastoreを使用しています。私はHiveSQLを使ってテーブルを手動で問い合わせることができます。しかし、私は、スパーク仕事で同じテーブルを使用する場合、それは入力パスが存在しないと言う：S3：org.apache.hadoop.mapred.InvalidInputException：によって引き起こさ// 入力パスを私はS3で私の上記のパーティションのパスを削除した

1熱

2答えて

以下の出力を生成するHiveQl/sqlロジック

sql/hqlの新機能です。私は------ ----- --------------- Card_IDミッド住所ハイブテーブルの下千201を持っていますMGロード、バンガロール千301 MGロード、バンガロール千401ヌル千501ヌル 2000 205プロット＃5、インディラナガル、デリー 2000 305のプロット＃5、インディラナガル、デリー 2000 405ヌル 3000 10

1熱

1答えて

Djangoハイブ接続

DATABASES = { 'default': { 'ENGINE': 'sql_server.pyodbc', 'NAME': 'sampletest', 'OPTIONS': { 'driver': '/opt/cloudera/hiveodbc/lib/64/libclouderahiveodbc64.so', 'd

0熱

2答えて

sparkで既存のHIVE物語にcsvファイルをロードする

以下は、RDBMSに接続してテンポラリテーブルを作成し、そのテンポラリテーブルでSQLクエリを実行し、SQLクエリ出力を.csvフォーマットに保存するために書いたコードですスルーdatabricksモジュール。私はコードを実行した後 HIVE.DBは、既存のHIVEデータベース HIVE.TBLある from pyspark import SparkContext sc = SparkConte

0熱

1答えて

UDFからHiveでカウンタを使用する方法を提供

UDF/UDAF/UDTF用にHiveでユーザー定義のカウンタを追加する方法はありますか？はいある

0熱

1答えて

なぜhave-env.shファイルに$ HADOOP_HOMEを設定する必要があるのですか？.bashrcファイルに既に設定されています

hive-env.shファイルに$ HADOOP_HOME変数を設定した理由を教えてくださいすでにhadoop設定中に.bashrcファイルで設定されています。

0熱

1答えて

spark 1.6ハイブコンテキストsetConf問題

ハイブコンテキストでパーティションテーブルにデータをロードするsqlを実行する際に問題が発生しましたが、私はdynamic partition = trueを設定しましたが、依然として問題が発生しています。 SQL： insert overwrite table target_table PARTITION (column1,column2) select * , deletion_flag ,'

0熱

1答えて

ハイブクエリをCSVにエクスポート

ハイブからローカルCSVにクエリをエクスポートしようとしています。この同じエラーが続く、どんな助けも大いに評価されるでしょう！コマンド： insert overwrite local directory '/path/to/directory' row format delimited fields terminated by ',' select * from table limit 10;

1熱

1答えて

Selectステートメントは、私が質問のこのタイプは、何度も尋ねたが、これらのソリューションは、私のために働いていない見てきましたヌル値

で一部の列を返します。私はデータがマップ専用のジョブ出力から得たので、外部のハイブテーブルを作成しました。次に、特定のファイルのパスを指定してコマンドをロードします。それは大丈夫だった。しかし、私がselect * from tableコマンドを実行すると、null値を持つ列が返されます。私が実行した各コマンドは、エラーpicにあります。ファイル内私の区切り文字は||あるので、私はあまりにもta