pysparkクラスパスは私がすることを得た私のpysparkコードを実行したときに、私は、SSHのconnetction</p> <p>throug Clouderaのサーバーにconectingています複数のSLF4JバインディングClouderaの

Question

が含まれています。 SLF4J：[jar：file：/opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/jars/slf4j-log4j12-1.7.5.jar！/ org/slf4jのバインディングが見つかりました/impl/StaticLoggerBinder.class] SLF4J：[jar：file：/opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/jars/avro-tools-1.7.6のバインディングが見つかりました-cdh5.4.7.jar！/org/slf4j/impl/StaticLoggerBinder.class] SLF4J：説明はhttp://www.slf4j.org/codes.html#multiple_bindingsを参照してください。 SLF4J：実際の結合は、タイプ[org.slf4j.impl.Log4jLoggerFactory] ​​

であるスパークバージョンが1.3.0

iは、サーバへのaccsesを有していないので、私はとしてのpom.xmlを変更することはできませんです誰もが言った

他に何かできますか？あなた

Answer 1

より

これはSLF4Jロギングエンジンからの警告のみであり、あなたのスパークセッションには影響を与えません。

環境変数SPARK_DIST_CLASSPATHを変更すると、それを取り除くことができます。おそらくhadoop classpathと/opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/jars/*という結果が含まれています。このワイルドカードのクラスパスを、すべてのjarファイルのリストで置き換えた場合（avro-tools-1.7.6-cdh5.4.7.jar）、警告は消えます。