mapreduce

32calore

7risposta

In maprouce MongoDB, come posso appiattire l'oggetto valori?

Sto cercando di utilizzare MongoDB per analizzare i file di registro di Apache. Ho creato una collezione receipts dai log di accesso di Apache. Ecco una sintesi ridotta di quello che i miei modelli as

12calore

8risposta

Come iniziare ad imparare hadoop

Sono uno sviluppatore web. Ho esperienza in tecnologie Web come JavaScript, Jquery, Php, HTML. Conosco i concetti di base di C. Recentemente mi ero interessato a saperne di più su mapreduce e hadoop.

5calore

2risposta

Selezionare distinta più di un campo usando la mappa di MongoDB ridurre

voglio eseguire questa istruzione SQL su MongoDB: SELECT DISTINCT book,author from library Finora MongoDB di DISTINCT supporta un solo campo alla volta. Per più di un campo, dobbiamo usare il comand

5calore

4risposta

In che modo Hive decide quando utilizzare la mappa ridurre e quando no?

Come semplice esempio, select * from tablename; NON SI calcio nel ridurre mappa, mentre select count(*) from tablename; fa. Qual è il principio generale utilizzato per decidere quando utilizzare l

5calore

2risposta

Come impostare il numero di attività della mappa in hadoop 0.20?

Sto provando a impostare il numero di attività della mappa da eseguire in ambiente hadoop 0.20. Sto usando la vecchia api. Qui ci sono le opzioni che ho provato finora: conf.set("mapred.tasktracker.ma

8calore

3risposta

mongodb: come eseguire il debug di mappa/ridurre su shell mongodb

Sono nuovo di MongoDB, sto usando map/reduce. Qualcuno può dirmi come eseguire il debug durante l'utilizzo di map/riduci? Ho usato la funzione "print()" ma sulla shell MongoDB, non viene stampato null

7calore

1risposta

Come tirare i dati nella mappa/ridurre le funzioni?

Secondo lo Hadoop : The Definitive Guide. La nuova API supporta sia uno stile "push" che uno "pull" di iterazione. In entrambe le API, le coppie di record valore-chiave vengono trasferite al mapper, m

43calore

3risposta

È meglio usare il pacchetto mapred o mapreduce per creare un lavoro Hadoop?

Per creare lavori MapReduce è possibile utilizzare il vecchio pacchetto org.apache.hadoop.mapred o il nuovo pacchetto org.apache.hadoop.mapreduce per Mapper e riduttori, Lavori ... Il primo era stato

5calore

1risposta

Python Streaming: come ridurre a più uscite (la sua possibile con Java però)

ho letto Hadoop in Action e ha scoperto che in Java utilizzando MultipleOutputFormat e MultipleOutputs classi siamo in grado di ridurre i dati a più file, ma quello che io non sono sicuro è come? otte

7calore

1risposta

Formato di input MapReduce personalizzato - Can not Find Constructor

Sto scrivendo un InputFormat personalizzato per Hadoop 0.20.2 e sto eseguendo un NoSuchMethodException di cui non posso sbarazzarmi. Ho iniziato con: public class ConnectionInputFormat extends FileInp