Hiveデータベースのサイズはどのように決定されますか？

Question

HiveのデータベースサイズはBashまたはHive CLIからどのように決定されますか？

hdfsおよびhadoopコマンドもBashで使用できます。

Answer 1

ハイブのデータベースはメタデータストレージです。つまり、テーブルに関する情報を保持し、デフォルトの場所を持っています。テーブルを作成するときにlocationが指定されている場合は、データベース内のテーブルをhdfsに格納することもできます。

show tablesコマンドを使用してデータベース内のすべてのテーブルを確認できます。Hive CLIです。

次に、テーブルごとに、hdfsの位置をdescribe formatted <table name>（やはりHive CLI）としています。

最後は、各テーブルのためにあなたはhdfs dfs -du -s -h /table/location/

私は、データベースのすべてのテーブルのサイズの合計を測定するための単一のコマンドがないと思う使用して、そのサイズを見つけることができます。ただし、上記の手順を自動化するスクリプトを作成するのはかなり簡単です。あなたは完全なデータベースのサイズがあなたの上でこれを実行したい場合は、HDFS

sudo hadoop fs -ls /apps/hive/warehouse 

表示ハイブデータベースのサイズ

sudo hadoop fs -du -s -h /apps/hive/warehouse/{db_name} 

Answer 2

表示ハイブデータベースを：ハイブも使用してbash CLIから呼び出すことができます「倉庫」

hdfs dfs -du -h /apps/hive/warehouse 

このgアイヴスあなたは、倉庫内の各DBのサイズ

あなたは、特定のDBラン内のテーブルの大きたい場合：

hdfs dfs -du -h /apps/hive/warehouse/<db_name> 

実行ウェアハウスを見つけるためハイブ-site.xmlの上の「grepの倉庫を」パス

Answer 3

上hive -e '<hive command>'