Zeppelin/Spark/Scalaでwrappedarrayを印刷するにはどうすればよいですか？

this質問には、zeppelinのz.showコマンドを使用してデータフレームを印刷する方法が教えられました。Zeppelin/Spark/Scalaでwrappedarrayを印刷するにはどうすればよいですか？

z.show(dfLemma.select(concat_ws(",", $"lemma")))

が、それはちょうど私の単語のリストを与え、きれいにフォーマットされていないと私も欲しい：私はこれを試してみました

：これはよく補題列に表示される「WrappedArray」を除いて動作します私の出力には人種差別的な列があります。何か助けていただければ幸いです。

出典

2017-07-11 schoon

：

import org.apache.spark.sql.Column import org.apache.spark.sql.functions._ import sqlContext.implicits._ val df = Seq( (1, Array("An", "Array")), (2, Array("Another", "Array")) ).toDF("first", "second") def formatArrayColumn(arrayColumn: Column): Column = { concat(lit("["), concat_ws(", ", arrayColumn), lit("]")).as(s"format(${arrayColumn.expr})") } val result = df.withColumn("second", formatArrayColumn($"second")) z.show(result)

にその結果を？ –

あなたの選択を変数に取り込み、それを適切なフォーマットに変換します。これで、変換された選択肢を印刷することができます。 –

はここにあなたの配列の列をフォーマットするための提案です：あなたはこの列のデータが示されることを期待するにはどうすればよい

出典

2017-07-11 08:38:03

ダニエルありがとうございますが、ちょうど2つの列を選択した場合でも大きな文字列を出力します：import org.apache.spark.sql.functions.concat_wsformatArrayColumn：（arrayColumn：org.apache.spark.sql.Column）org.apache .spark.sql.Columnresult：org.apache.spark.sql.DataFrame = [racist：ブーリアン、コントリビュータ：string ... 27個以上のフィールド]％racist \t lemmafalse \t [rt、@dope_promo、：、そして、あなた、乗組員、ビート – schoon

@ schoonだから、この列の出力として期待していることについてあなたの質問に明確にしてください。 –

私はあなたが作ったものを期待していました。しかし、私が得るのは、長い文字列です。 – schoon

Zeppelin/Spark/Scalaでwrappedarrayを印刷するにはどうすればよいですか？

答えて

関連する問題