2016-07-27 26 views
0

私は実行中のHadoop 2.7とHive 2.0.1を持っています。私はHiveQLクエリを簡単に書くことができるように、Hiveエディタをインストールしようとしています。したがって、私はHue 3.10をダウンロードしてビルドしました。 HDFSとHiveで動作するように設定しています(私は正しいとは確信していません)。私は色相を起動すると、それは構成をチェックして、私は色相Apache HadoopとHive(Redhat)に色相をインストール

のサーバーログに多少の誤差が関連webhdfsを参照してください
[27/Jul/2016 23:08:55 -0700] webhdfs  ERROR Failed to determine superuser of WebHdfs athttp://40.221.1.44:50070/webhdfs/v1/: <HTML><HEAD> 

..... 
..... 
[27/Jul/2016 23:10:10 -0700] webhdfs  INFO  WebHdfs at http://40.221.1.44:50070/webhdfs/v1/ -- Validation error: <HTML><HEAD> 
<TITLE>Network Error</TITLE> 
<script type="text/javascript">document.location.href="http://fr0-proxy-vip.eu.ab.corp/error/page.php?id=tcp_error&proxy=fr0-proxylan-p01&summary=Network Error&url=40.221.1.44&category=none&user=&ip=40.221.1.44&details=A communication error occurred: "Operation timed out""</script> 
<meta http-equiv="REFRESH" content="0;url='http://fr0-proxy-vip.eu.ab.corp/error/page.php?id=tcp_error&proxy=fr0-proxylan-p01&summary=Network Error&url=40.221.1.44&category=none&user=&ip=40.221.1.44&details=A communication error occurred: "Operation timed out"'"> 
</HEAD> 
<BODY> 
<FONT face="Helvetica"> 
<big><strong></strong></big><BR> 
</FONT> 
<blockquote> 
<TABLE border=0 cellPadding=1 width="80%"> 
<TR><TD> 
<FONT face="Helvetica"> 
<big>Network Error (tcp_error)</big> 
<BR> 
<BR> 
</FONT> 
</TD></TR> 
<TR><TD> 
<FONT face="Helvetica"> 
A communication error occurred: "Operation timed out" 
</FONT> 
</TD></TR> 
<TR><TD> 
<FONT face="Helvetica"> 
The Web Server may be down, too busy, or experiencing other problems preventing it from responding to requests. You may wish to try again at a later time. 
</FONT> 
</TD></TR> 
<TR><TD> 
<FONT face="Helvetica" SIZE=2> 
<BR> 
For assistance, contact the Service Desk (8666). 
</FONT> 
</TD></TR> 
</TABLE> 
</blockquote> 
</FONT> 
</BODY></HTML> 
(error 503) 

私はHDFS-site.xmlの中で情報の下に

<property> 
    <name>dfs.webhdfs.enabled</name> 
    <value>true</value> 
</property> 

を持っている私は約気にしません他のアプリだが、HadoopとHiveに本当に関係している。どんな助けでも大歓迎です。

HDFS-site.xmlの

<configuration> 
    <property> 
     <name>dfs.webhdfs.enabled</name> 
     <value>true</value> 
    </property> 
    </configuration> 

マイコア-site.xmlの

<property> 
<name>hadoop.proxyuser.baamarna5617.hosts</name> 
<value>*</value> 
</property> 
<property> 
<name>hadoop.proxyuser.baamarna5617.groups</name> 
<value>*</value> 
</property> 

私は、ユーザーbaamarna5617としてのHadoopをインストールしました。

色相ブラウザを起動すると、この名前のユーザーアカウント「baamarna5617」が作成されました。私は自分のhdfsで/ user/baamarna5617を作成しました。

私mapred-site.xmlので、私は、以下の行に

<property> 
    <name>jobtracker.thrift.address</name> 
    <value>0.0.0.0:9290</value> 
    </property> 
    <property> 
     <name>mapred.jobtracker.plugins</name> 
     <value>org.apache.hadoop.thriftfs.ThriftJobTrackerPlugin</value> 
      <description>Comma-separated list of jobtracker plug-ins to be activated.</description> 
      </property> 

そして、私のhttps-site.xmlで

<property> 
    <name>httpfs.proxyuser.hue.hosts</name> 
    <value>*</value> 
    </property> 
    <property> 
     <name>httpfs.proxyuser.hue.groups</name> 
     <value>*</value> 
     </property> 

が含まれていた私のハイブ-site.xmlの

<property> 
    <name>hive.hwi.listen.host</name> 
    <value>40.221.1.44</value> 
</property> 

<property> 
    <name>hive.server2.transport.mode</name> 
    <value>http</value> 
</property> 


<property> 
    <name>hive.server2.thrift.bind.host</name> 
    <value>40.221.1.44</value> 
</property> 

<property> 
    <name></name> 
    <value>http</value> 
</property> 


<property> 
    <name>hive.server2.webui.host</name> 
    <value>40.221.1.44</value> 
</property> 

    <property> 
    <name>hive.server2.webui.port</name> 
    <value>10002</value> 
</property> 


<property> 
    <name>hive.server2.thrift.http.port</name> 
    <value>10001</value> 
</property> 

<property> 
    <name>hive.server2.thrift.http.path</name> 
    <value>cliservice</value> 
</property> 

<property> 
    <name>hive.server2.thrift.port</name> 
    <value>10000</value> 
</property> 


<property> 
    <name>hive.metastore.thrift.framed.transport.enabled</name> 
    <value>true</value> 
</property> 


<property> 
    <name>hive.metastore.warehouse.dir</name> 
    <value>/user/hive/warehouse</value> 
</property> 

さらに詳しい情報: -

私はネットワークプロキシとして動作しています

webhdfsを使用してディレクトリを正常に作成できませんでした。私はhdfsディレクトリを列挙してファイルを読むことができますが、ファイルの名前を変更してhdfsにディレクトリを作成することはできません。

答えて

1

問題はカールでした。私はすべてのプロキシセットをアップグレードして削除し、動作し始めました。ありがとう。

関連する問題