0
spark 2.0、sbt 0.13、Scala Test 3.0を使用していますが、JARファイルをテストするようなコマンドから引数を渡す方法を知りたいのですが。Scala引数を指定したJARファイル
たとえば、spark-submit my-test-file.jar args1 args2とし、テストスイートのテストケースではargs1とargs2の値を取得できます。
A
答えて
1
spark.driver.extraJavaOptions –Dlog4j.configuration=file:///spark/conf/log4j.properties -
spark.executor.extraJavaOptions –Dlog4j.configuration=file:///spark/conf/log4j.properties -Dapplication.properties.file=hdfs:///some/path/on/hdfs/testcase.properties
spark.application.properties.file hdfs:///some/path/on/hdfs/testcase.properties
あなたがこの方法を試してみました...財産多分ファイルtestcase.propertiesかの.confへのそれらをラップし、以下のように使用してください？ –