hdfs

7calore

1risposta

immagine dello spazio dei nomi e modificare il login

Dal libro "Hadoop The Definitive Guide", sotto il tema Namenodes e Datanodes si è detto che: NameNode gestisce lo spazio dei nomi file system. Mantiene la struttura del file system e i metadati per tu

9calore

3risposta

Come montare HDFS su Ubuntu 14.04

Quindi, non posso montare HDFS su Ubuntu 14.04. Mucommander non funziona, la miccia non funziona, qualcuno può spiegarmi con le immagini o farmi un tutorial. Grazie e cordiali saluti.

9calore

2risposta

Trasferimento di file da nodo remoto a HDFS con Flume

Ho un sacco di file binari compressi in formato * gz. Questi sono generati su un nodo remoto e devono essere trasferiti su HDFS che si trova su uno dei server del datacenter. Sto esplorando l'opzione

18calore

5risposta

Trova numero di porta dove HDFS è in ascolto

voglio accedere HDFS con nomi completi quali: hadoop fs -ls hdfs://machine-name:8020/user potrei anche semplicemente accedere HDFS con hadoop fs -ls /user Tuttavia, vi scrivo casi di test che dovr

5calore

1risposta

Come eseguire HBase in modalità distribuita su Windows senza Cygwin?

Ho configurato HBase e integrato con HDFS su Windows con successo. Ho usato HBase versione 0.98.6.1-hadoop2 e Hadoop versione 2.5.1 Tutorial HBase quick start seguito. Se eseguo HBase normalmente (sen

11calore

1risposta

Perché spark-shell --master yarn-client fallisce (ma il filato pyspark --master sembra funzionare)?

Sto provando a lanciare la scintilla sul mio cluster Hadoop tramite Yarn. Io uso Hadoop 2.4.1 Spark 1.0.0 grappolo mio Hadoop funziona già. Per poter utilizzare Spark, Spark ho costruito come descritt

5calore

1risposta

impossibile installare rJava in centesimi R

Iam non è in grado di installare rJava in centos R, è la base per installare rhdf. Si prega di aiutare e guardare l'output che ho ottenuto durante l'installazione di RJava. > install.packages(c("rJava

14calore

2risposta

Cosa si intende per "HDFS non ha accesso casuale in lettura e scrittura"?

qualsiasi file system dovrebbe fornire un'API per accedere ai file e directory, ecc Quindi, cosa si intende per "HDFS manca lettura casuale e scrittura"? Quindi, dovremmo usare HBase.

11calore

5risposta

Verificando directory in HDFS esiste o no

Sto avendo seguente struttura di directory in HDFS già, /analysis/alertData/logs/YEAR/MONTH/DATE/HOURS che è dati è in arrivo su base houly e memorizzati in formato anno/mese/giorno/ora. Ho scritto

9calore

2risposta

L'accesso a un file che viene scritto

You use the hadoop fs –put command to write a 300 MB file using and HDFS block size of 64 MB. Just after this command has finished writing 200 MB of this file, what would another user see when trying