cluster-computing

5calore

1risposta

Esecuzione di un binario senza uno script di livello superiore in SLURM

In SGE/PBS, posso inviare binari eseguibili al cluster proprio come farei localmente. Per esempio: qsub -b y -cwd echo hello sarebbe inoltrare un processo chiamato eco, che scrive la parola "ciao" a

bash cluster-computing pbs sungridengine slurm 2015-10-28

---

5calore

2risposta

socket.io + Redis + expressjs grappolo - ottenere oggetto socket in expressjs richiedere

domanda in base a questa risposta: https://stackoverflow.com/a/18650183/4478897 ho cercato di trovare questa soluzione, ma nulla sembra funzionare nel modo in cui ho bisogno. Clustering expressjs e so

node.js express redis socket.io cluster-computing 2016-02-10

---

8calore

2risposta

Perché è possibile avere "risultati serializzati di n attività (XXXX MB)" maggiore di `spark.driver.memory` in pyspark?

ho lanciato un lavoro scintilla con queste impostazioni (tra gli altri): spark.driver.maxResultSize 11GB spark.driver.memory 12GB ero il debug il mio pyspark lavoro, ed è tenuto a darmi l'errore:

apache-spark jvm buffer cluster-computing pyspark 2016-07-17

---

5calore

2risposta

Monitorare un cluster di nodi

Ho> 10 nodi in un cluster. Ho installato uno stack Hadoop sul cluster usando Cloudera (YARN, HBase, Hue, Hadoop FS, Spark, Flink). C'è un modo semplice per raccogliere statistiche globali di tutti i n

python hadoop statistics cluster-computing monitor 2016-07-17

---

6calore

1risposta

Avviare più cluster h2o dall'interno R

La mia intenzione è avviare due o più cluster/istanze h2o (non due o più nodi!) dall'interno di R sullo stesso computer/server per consentire a più utenti di connettersi con h2o a lo stesso tempo. Ino

r windows cmd cluster-computing h2o 2016-07-18

---

5calore

1risposta

Limita la pianificazione dei lavori di Condor: uno per macchina fisica

Ho bisogno di avviare un lavoro Condor su un cluster con più slot per macchina. Ho un ulteriore requisito che due posti di lavoro non possono essere messi nello stesso momento nella stessa macchina fi

networking cluster-computing job-scheduling condor 2016-04-14

---

8calore

1risposta

Come inviare un lavoro spark su un nodo master remoto nella modalità client filato?

Ho bisogno di inviare app/lavori con scintilla su un cluster di accensione remoto. Al momento ho acceso la mia macchina e l'indirizzo IP del nodo principale come filato-client. Btw la mia macchina non

hadoop apache-spark cluster-computing yarn 2016-06-06

---

8calore

1risposta

TensorFlow: configurazione Multi-GPU (prestazioni)

Mi piacerebbe sapere cosa è considerato "best practice" per sistemi multi-GPU quando si allena reti con TensorFlow. ad esempio uno dei miei reti si presenta così: input | (.

machine-learning cluster-computing tensorflow cudnn 2016-03-03

---

12calore

2risposta

Esecuzione di TensorFlow su un cluster Slurm?

Potrei accedere a un cluster di elaborazione, in particolare un nodo con due CPU 12-core, che è in esecuzione con Slurm Workload Manager. Mi piacerebbe eseguire TensorFlow su quel sistema ma sfortunat

python python-2.7 cluster-computing tensorflow slurm 2016-01-16

---

6calore

3risposta

Cluster Hadoop a più nodi con finestra mobile

Sono in fase di pianificazione di un cluster multivoda Hadoop in un ambiente basato su Docker. Quindi dovrebbe essere basato su un sistema virtualizzato leggero e facile da usare. L'architettura corre

hadoop docker hdfs cluster-computing cloudera 2016-01-25

---