Sto cercando di convertire una colonna che contiene Array [String] per stringa, ma ho sempre ottenere questo erroreCome si converte una colonna WrappedArray in spark dataframe in Stringhe?
org.apache.spark.SparkException: Job aborted due to stage failure: Task 0 in stage 78.0 failed 4 times, most recent failure: Lost task 0.3 in stage 78.0 (TID 1691, ip-******): java.lang.ClassCastException: scala.collection.mutable.WrappedArray$ofRef cannot be cast to [Ljava.lang.String;
Ecco il pezzo di codice
val mkString = udf((arrayCol:Array[String])=>arrayCol.mkString(","))
val dfWithString=df.select($"arrayCol").withColumn("arrayString",
mkString($"arrayCol"))
Ho cercato di usare WrappedArray ma quel tipo non era riconosciuto. Seq funziona bene – bdguy