hbase

1熱

1答えて

私はhadoop 2.6.0とhbase 0.98.7を使用していますが、hdfs/namenode用にHAを設定しました。アクティブなnn1とスタンバイnn2が表示されています。今、問題は、私はhbaseの高可用性を有効にすることができません、また、私はどのようにHAベースのhdfsを有効に統合するのか分かりません。また、jps HMasterを実行しているが、hbaseのUIが表示されない。

0熱

1答えて

hbaseクライアントAPIを介して主要なコンパクション完了ステータスの完了を見つける方法はありますか？

hbaseのすべてのテーブルに対して大きな圧縮をトリガーしたい。 hbaseクライアントAPIを使用すると、admin.majorCompact（tableName）を使用して常に主要な圧縮がトリガーされます。 1）hbaseクライアントAPIのmajorCompactは非同期プロセスなので、コンパクションの完了ステータスを調べる方法。 2）は、それが必須、圧縮プロセスが完了するまで待機するように

0熱

1答えて

HBaseではColumnFamily TTLはどういう意味ですか？

我々は2CF（CF1、CF2）を有すると仮定しよう。 CF2のTTLが1日で、CF2に2つのColumnQualifiersがあるとします。これは主要な圧縮中の日よりも古いCF2内の任意のセルが自動的に（MIN-バージョン== 0限り）ドロップされることを意味するのでしょうか？ドキュメントで、彼らが行ない、彼らが何を意味するかを確認してくださいを参照保つので、私は...ドキュメントからの私の理

0熱

1答えて

複数のフィルタは、HBaseの1.2.6

では動作しない私のHBaseのスキーマは、次のように次のようになります。 { "<trace-id>": { "span-timestamp": { "ts:span:<timestamp>": "" }, "span-name": { "ts:span:<name>": "" }, "span-du

-1熱

1答えて

HBaseの列を変更できません

これは初心者のHBaseの質問です。それが作成された hbase(main):042:0> create 'ship', 'cf1' 0 row(s) in 1.2200 seconds => Hbase::Table - ship ：私は、HBaseの中のテーブル（1.2.6）を持つ hbase(main):046:0> desc 'ship' Table ship is ENABLE

0熱

1答えて

スパークは、複数の列を持つ1つのrowKeyに対してHFileを作成します。

JavaRDD<String> hbaseFile = jsc.textFile(HDFS_MASTER+HBASE_FILE); JavaPairRDD<ImmutableBytesWritable, KeyValue> putJavaRDD = hbaseFile.mapToPair(line -> convertToKVCol1(line, COLUMN_AGE)); putJavaRD

1熱

1答えて

なぜHBaseにバックアップされたHiveテーブルがMapReduceを使用する

私のプロジェクトでHbaseのバックアップHiveテーブルを使用していますが、HbaseをバックアップしたHiveを選択した理由は更新を実行するためです。これ以外に、HbaseでバックアップされたHiveテーブルの利点があります。 Hiveから質問されたときでもMapReduceを使用しています。小さなデータセットが必要であっても、テーブルが巨大なので結果を与えるのに時間がかかります。ただし

0熱

1答えて

ハイブとスキーマの進化

ユーザープロファイルデータを作成する必要があります。このプロファイル・データ/スキーマは、時間の経過とともに進化する意味を維持し、より多くの属性がプロファイルに追加されます。一部のデータは、削除、更新、および拡張できます。ハイブ+アブロがそのような用途に適したストアであるかどうかを知りたい（私は、ハイブがスキーマレスではなく、スキーマの進化をサポートしていないと推測しています。 HBase /カ

2熱

1答えて

HBase/Hive/Sparkのフロー

私はHDFS、Hive/HBase/Phoenix/Sparkでのデータフローに関するプレゼンテーションを作成しています。下のビジュアルが正しい「シーケンス」を描いているので、データの流れについて話すことができます。ほとんどすべてがHDFSの上を走っているので、HDFSの上になるように設計されています。

0熱

1答えて

のHBase：私は、次の行のキー形式含むHBaseのテーブル持っている文字列

含む行キーのスキャン： <salt>:<id>#<category>#<class> 000001:1234#AAAAAAAAAA#BBBBBBB 000001:2345#CCCCCCCCCC#DDDDDDD 000002:1234#EEEEEEEEEE#FFFFFFF ... を私は行のキーにScanを作成し、すべての行を取得したいのですがキーにはid=1234が含まれています。