Mantenere distribuito database sincronizzati in una rete instabile

Question

sto affrontando la seguente sfida:

Ho un sacco di basi di dati in aree geografiche in cui la rete non può riuscire un sacco (sto usando la rete cellulare). Devo mantenere tutti i database sincronizzati ma non è necessario essere in tempo reale. Sto usando Java, ma ho la libertà di scegliere qualsiasi database gratuito.

Qualsiasi suggerimento su come posso ottenere questo.

Grazie.

Answer 1

Non sono a conoscenza di alcun database che ti fornisca questa funzionalità fuori dalla scatola; c'è molta complessità qui a causa della necessità di coerenza finale e risoluzione dei conflitti (ad esempio, cosa succede se la rete viene divisa in 2 metà e si aggiorna qualcosa al valore 123 mentre lo aggiorno nell'altra metà a 321, e quindi le reti si riconnettono?)

Potrebbe essere necessario eseguire il rollover.

Per alcune idee su come fare questo, controlla la progettazione del sistema di Yahoo PNUTS: http://research.yahoo.com/node/2304 e la Dinamo di Amazon: http://www.allthingsdistributed.com/2007/10/amazons_dynamo.html

Answer 2

Non conosco le vostre esigenze o le vostre app, ma questa non è una risposta rapida tipo di domanda. Sono molto interessato a vedere cosa hanno da dire gli altri. Tuttavia, ho un suggerimento che può o non può funzionare per te, a seconda delle tue esigenze e della situazione. in particolare, questo non aiuta se gli utenti hanno bisogno di usare l'app anche quando la rete non è disponibile (accesso offline).

Tenere un gruppo di piccoli database sincronizzati è un'operazione abbastanza complessa da eseguire correttamente. Esiste la possibilità di avere un solo database centralizzato, e se le applicazioni client si collegano direttamente ad esso o (la mia soluzione preferita) scrivono alcuni servizi web per gestire l'accesso/aggiornamento dei dati piuttosto che avere un gruppo di database client?

Mi rendo conto che ciò limita l'accesso offline, ma esistono varie strategie di memorizzazione nella cache che è possibile utilizzare. (Che, naturalmente, ti riconduce alla tua domanda originale.)

Answer 3

Si tratta di un problema con un corpus piuttosto consolidata di ricerca (di cui la gente è apparentemente inconsapevole) . Suggerisco di non reinventare una ruota povera e difettosa se non assolutamente necessario (come, ad esempio, requisiti così insoliti da consentire una soluzione banale).

Alcune parole chiave: replication, mobile DBMSs, distributed disconnected DBMSs.

anche questi lavori di ricerca sono rilevanti (come un esempio di questo campo di ricerca):

1. Distributed disconnected databases,
   • The dangers of replication and a solution,
   • Improving Data Consistency in Mobile Computing Using Isolation-Only Transactions,
   • Dealing with Server Corruption in Weakly Consistent, Replicated Data Systems,
   • Rumor: Mobile Data Access Through Optimistic Peer-to-Peer Replication,
   • The Case for Non-transparent Replication: Examples from Bayou,
   • Bayou: replicated database services for world-wide applications,
   • Managing update conflicts in Bayou, a weakly connected replicated storage system,
   • Two-level client caching and disconnected operation of notebook computers in distributed systems,
   • Replicated document management in a group communication system,

... e così via.

Answer 4

Check out SymmetricDS. SymmetricDS è un software di sincronizzazione/sincronizzazione dei dati basato su web, indipendente dal database. Utilizza tecnologie web e di database per replicare tabelle tra database relazionali in tempo quasi reale. Il software è stato progettato per adattarsi a un gran numero di database, lavorare su connessioni a bassa larghezza di banda e resistere a periodi di interruzione della rete.