javaRDDをXMLファイルとして保存

Question

Apache SparkにJava RDDのテキストをXMLファイルとして保存する方法はありますか？

私は現在、saveAsTextFileメソッドを使用してRDDをプレーンテキストファイルとして保存し、XMLに変換しています。 RDDから直接XMLファイルを作成する方法を見つけることに興味があります。

どのようなヒント、アイデア、ガイドがあれば幸いです。

Answer 1

databricks xml libraryを参照して、xmlとの間でデータの読み書きを行うことができます。データからスキーマを推論する：

import org.apache.spark.sql.SQLContext 

SQLContext sqlContext = new SQLContext(sc); 
DataFrame df = sqlContext.read() 
    .format("com.databricks.spark.xml") 
    .option("rowTag", "book") 
    .load("books.xml"); 

df.select("author", "_id").write() 
    .format("com.databricks.spark.xml") 
    .option("rootTag", "books") 
    .option("rowTag", "book") 
    .save("newbooks.xml");