partitioning

5calore

1risposta

Come partizionare una matrice di numeri interi in modo da minimizzare il massimo della somma di ciascuna partizione?

Gli input sono un array A di interi positivi o nulli e un altro intero K. Dobbiamo partizionare A in blocchi K di elementi consecutivi (per "partizione" intendo che ogni elemento di A appartiene a qua

6calore

1risposta

È sicuro utilizzare il partizionamento delle tabelle Postgres con vincoli sovrapposti?

Postgres documentazione dice che le condizioni in partizioni della tabella non devono sovrapporsi Assicurarsi che i vincoli garantiscono che non v'è sovrapposizione tra i valori chiave permesso in par

6calore

1risposta

Partizionamento! come fa hadoop farlo? Usa una funzione hash? qual è la funzione predefinita?

Il partizionamento è il processo per determinare quale istanza del riduttore riceverà quali chiavi e valori intermedi. Ogni mappatore deve determinare per tutte le sue coppie di output (chiave, valore

8calore

1risposta

predefinito Schema di partizionamento in Spark

Quando eseguire sotto comando: scala> val rdd = sc.parallelize(List((1,2),(3,4),(3,6)),4).partitionBy(new HashPartitioner(10)).persist() rdd: org.apache.spark.rdd.RDD[(Int, Int)] = ShuffledRDD[10] at

6calore

1risposta

Partizionamento delle tabelle dinamiche in postgres

Stavo cercando modi per avere i dati delle partizioni postgres nelle tabelle basate sul timestamp, ad esempio, ma senza dover aggiungere manualmente le tabelle figlio rilevanti. Ho visto questo post d

7calore

1risposta

È possibile creare un argomento kafka con il conteggio delle partizioni dinamico?

Sto utilizzando kafka per trasmettere in streaming gli eventi delle visite alle pagine degli utenti del sito Web a un servizio di analisi. Ogni evento conterrà i seguenti dettagli per il consumatore:

5calore

2risposta

Partizionamento MySQL per settimana automaticamente

Ho creato una tabella per registrare l'attività della mia applicazione. Questa tabella registrerà più di 2 milioni di record al mese. Così voglio usare il partizionamento per mese o settimana CREATE T

47calore

5risposta

Kafka: Zookeeper è un must?

In Kafka, vorrei utilizzare solo un singolo broker, un singolo argomento e una singola partizione con un produttore e più utenti (ogni consumatore riceve la propria copia dei dati dal broker). Detto q

8calore

1risposta

Elenco partizioni Java 8

È possibile suddividere una lista in puro Jdk8 in blocchi uguali (sottoliste). So che è possibile utilizzare la classe Guava Lists, ma possiamo farlo con puro Jdk? Non voglio aggiungere nuovi vasi al

7calore

2risposta

pyspark dati di partioning utilizzando partizione

Capisco che i miei dati siano le partizioni delle funzioni partitionBy. Se utilizzo rdd.partitionBy(100), partirà i miei dati con la chiave in 100 parti. cioè i dati associati a chiavi simili saranno