Ho installato Spark, ho eseguito il montaggio sbt e posso aprire bin/pyspark senza problemi. Tuttavia, sto incontrando problemi nel caricare il modulo pyspark in ipython. Sto ottenendo il seguente err
Ho recentemente scoperto py4j ed è stato in grado di chiamare metodi java statici da python. Ora voglio chiamare i metodi python da java. Non sono riuscito a trovare molta documentazione, quindi quest
Ho bisogno di creare una UDF da utilizzare in Python python che utilizza un oggetto java per i suoi calcoli interni. Se si trattasse di un semplice pitone vorrei fare qualcosa di simile: def f(x):