LuceneのHive

Question

Hadoopを介して配布されているLuceneインデックスのクエリにHiveを使用できますか？

Answer 1

私が知っている限り、基本的にHiveでカスタムの行抽出​​コードを書くことができます。私はLuceneを一度も使用しておらず、Hiveをほとんど使用していないので、わかりません。あなたの質問に対するより決定的な答えを見つけたら、投稿してください！

Answer 2

Hadaptは、HadoopとSQLフロントエンド（Hiveのような）とハイブリッドストレージエンジンとの橋渡しをするスタートアップ企業です。彼らはあなたのニーズを満たすかもしれないarchival text search機能を提供します。

免責事項：私はHadaptで働いています。

Answer 3

私はこれがかなり古い投稿であることを知っていますが、もっと良い選択肢を提供できると思いました。

あなたのHDFS Luceneインデックスをハイブスキーマにマッピングするという手間を省くのではなく、ブタがフラットファイルを読み取ることができるので、ブタにプッシュする方が良いでしょう。データを格納するリレーショナルな方法が必要な場合を除き、おそらくPigでそれらを処理し、DBとしてHbaseを使用できます。

Answer 4

HiveがHadoopのluceneインデックスにアクセスするためのカスタム入力フォーマットを書くことができます。