Spark 2.0でPython 2/3用のスパークサービスを作成するにはどうすればいいですか?新しいサービスを作成し、それをPythonノートブックに関連付けます(Python 2とSpark 1.6)。なぜ私はデータレンガのフリー版のように私が作成しているサービスの設定を見ることができないのですか? Sparkセッション変数を作成するために、Spark 2.0で導入されたSparkSession APIを使用したいと思います。Python 2 with Spark 2.0
0
A
答えて
2
次の中でPythonとSparkのバージョンを選択できます。
a。データサイエンスエクスペリエンスで新しいノートブックを作成する:
DSX `Project` --> Overview--> `+ add notebooks` --> `Choose the language` (Python2/R/Scala/Python3) and Spark version (1.6/2.0/2.1).
b。既存のノートブックのカーネルを変更する:あなたが独自の設定でサービスを作成していないので、
From any running notebook, on the notebook menu choose `Kernel` and then choose the language and Spark version combination of your choice.
1
あなたは、あなたが作成しているサービスの構成を見ることができません。 BluemixとData Science ExperienceのサービスインスタンスであるApache Sparkは、共有クラスタ内で実行スロットを取得しています。その共有クラスターの構成は、IBMによって管理されます。
インスタンスのJupyterノートブックサーバーには、サポートされている言語とSparkバージョンの組み合わせごとにカーネル仕様があります。ノートブックを別の組み合わせに切り替えるには、「カーネル - >カーネルの変更 - >(何でも)」を選択します。ノートブックを作成するときは、言語とSparkのバージョンを別々に選択してください。
関連する問題
- 1. Play with Spark 2.0! 2.5
- 2. Spark Streaming with wholeTextFiles
- 3. Spark 2.0 set jars
- 4. String、Spark 2.0のデータセットペア
- 5. SAML 2.0 with C#
- 6. KMeans with Spark 1.6.2 VS Spark 2.0.0
- 7. Spark and Spark SQL with Java
- 8. NoClassDefFoundError with spark
- 9. Gnuplot python with 2 list
- 10. Python Dictionary with 2 Keys?
- 11. spark 2.0へのアップグレード
- 12. With.Parameters.ConstructorArgument with ninject 2.0
- 13. JSON with .Net 2.0
- 14. Spark exception with java.lang.ClassNotFoundException:de.unkrig.jdisasm.Disassembler
- 15. JanusGraph with Spark
- 16. Laravel Spark with braintree
- 17. Spark-Scala with Cassandra
- 18. Spark Request with time
- 19. Google Analytics with Spark
- 20. Spark AVRO with BigQuery
- 21. spark session with hivecontext
- 22. Spark with Cython
- 23. UIMA with Spark
- 24. Spark 2.0 spark implicitsがありません
- 25. Scala 2.11 Spark 2.0 hortonworks-spark/shc sbt assemby
- 26. Jupiter Notebook with Apache Spark(カーネルエラー)
- 27. SAML 2.0 with .Net 1.1
- 28. Symfony 2.0 FOSUserBundle with OpenID
- 29. async/polymer with await 2.0
- 30. JPA 2.0 with Glassfish 2.1