apache-spark-mllib

10calore

2risposta

Sto cercando di costruire una semplice applicazione standalone scala utilizzando il Mllib, ma ottengo il seguente errore quando si cerca di bulid il programma: Object Mllib is not a member of package

6calore

1risposta

Salva Apache Spark modello mllib in pitone

Sto provando a salvare un modello adattato in un file in Spark. Ho un cluster Spark che allena un modello RandomForest. Vorrei salvare e riutilizzare il modello montato su un'altra macchina. Ho letto

6calore

1risposta

Converti RDD di Vector in LabeledPoint utilizzando Scala - MLLib in Apache Spark

Utilizzo MLlib di Apache-Spark e Scala. Ho bisogno di convertire un gruppo di vettore import org.apache.spark.mllib.linalg.{Vector, Vectors} import org.apache.spark.mllib.regression.LabeledPoint

9calore

1risposta

Implementazione Spider MLLib TFIDF per LogisticRegression

Provo ad utilizzare il nuovo algorithem TFIDF che offre scintilla 1.1.0. Sto scrivendo il mio lavoro per MLLib in Java, ma non riesco a capire come far funzionare l'implementazione di TFIDF. Per qualc

17calore

3risposta

formazione incrementale della SLA modello

sto cercando di scoprire se è possibile avere "una formazione incrementale" su dati utilizzando MLlib in Apache Spark. La mia piattaforma è previsione IO, ed è fondamentalmente un wrapper per Spark (M

10calore

4risposta

Come utilizzare mllib.recommendation se gli ID utente sono una stringa anziché interi contigui?

Desidero utilizzare la libreria Spark mllib.recommendation per creare un sistema di raccomandazione per prototipi. Tuttavia, il formato dei dati utili che ho è qualche cosa del seguente formato: AB123

8calore

4risposta

PySpark & MLLib: Probabilità di classe di previsioni di foresta casuale

Sto tentando di estrarre le probabilità di classe di un oggetto foresta casuale che ho formato utilizzando PySpark. Tuttavia, non vedo un esempio in alcun punto della documentazione, né è un metodo di

7calore

2risposta

Come valutare tutte le combinazioni prodotto-utente in Spark MatrixFactorizationModel?

Dato un MatrixFactorizationModel quale sarebbe il modo più efficiente per restituire la matrice completa delle previsioni del prodotto utente (in pratica, filtrata da qualche soglia per mantenere la s

17calore

2risposta

apache spark MLLib: come creare punti etichettati per le caratteristiche delle stringhe?

Sto provando a costruire un classificatore NaiveBayes con MLLib di Spark che prende come input un insieme di documenti. mi piacerebbe mettere alcune cose come caratteristiche (cioè autori, etichette e

12calore

2risposta

Aggiunta di due RDD [mllib.linalg.Vector] '

Ho bisogno di aggiungere due matrici che sono memorizzate in due file. Il contenuto di latest1.txt e latest2.txt ha la prossima str: 1 2 3 4 5 6 7 8 9 io sto leggendo i file come segue: scala> v