Dati spaziali con mongodb o cassandra

Question

Sto considerando una Prova di concetto per la gestione di grandi volumi di dati come> 10 G che richiede almeno 200 scritture al secondo e circa 50 + letture al secondo di dati spaziali. Anche questo è un sistema in crescita. Attualmente sto considerando di spostare questo grande volume di dati in una grande tabella NoSql di db per motivi di prestazioni.

Ho preso in considerazione e dato un'occhiata più da vicino a MongoDB e cassandra. Per quanto riguarda la mia lettura va,

MongoDB: - sembra avere uno scrittore problema di blocco - uno dei posti in StackOverflow suggerito questo db se non v'è alcuna necessità di più server - Indici tenuti sulla memoria. Quindi, maggiore è la crescita dell'indice, la performance si deteriorerebbe indicizzazione e funzioni come trovare posizioni vicine ecc., - Vedo questo post Cassandra Or MongoDB For Our Location Based Application suggerendo mongodb come scelta migliore

Cassandra:
- Sembra essere il migliore dei tra i relativi DBS - Sembra avere grande scrittura così come le prestazioni leggere - non supporta nativamente indicizzazione spaziale, ma questo può essere esteso tramite geohashing

mio il cuore in realtà si spegne per mongodb per questo s buona documentazione e supporto diretto per i dati spaziali. Qualche organismo ha avuto brutte esperienze usando mongodb per sistemi così grandi? In realtà vedo molti post su iMongodb iostat per le prestazioni.

Se mongodb non è adatto, qualcuno può dare alcune indicazioni sul geohashing usando cassandra? Ho visto il collegamento http://code.google.com/p/geospatialweb/ per creare gli hash. Ma ci sono domande su come interrogare, ecc.?

Answer 1

Mi rendo conto che questa è una domanda più vecchia e so che non risponde direttamente alla tua domanda, ma a seconda delle tue domande, Cassandra potrebbe non essere l'opzione migliore, e ottenere le tue query per lavorare con l'indicizzazione in MongoDB può essere problematico (nella mia esperienza personale). Mongo ha un leggero vantaggio su Cassandra per i dati geografici pesanti e le query imho.

Suggerirei anche di esaminare ElasticSearch, che a seconda della forma dei dati e dei tipi di query che verranno effettuati è probabilmente la soluzione migliore. Quando hai pubblicato la tua domanda, probabilmente era meno un'opzione rispetto a oggi.

Answer 2

Al momento usiamo anche Cassandra e cerchiamo una soluzione di indice spaziale. Andiamo con Lucene per fornire il testo completo e la ricerca attribuita e insieme a esso viene fornito il supporto per l'indicizzazione spartial. Forse vuoi controllare anche questo.

nostra implementazione corrente assomiglia sharding le informazioni sulla base di un semplice albero (griglia riferiscono) e ciascun frammento è un indice Lucene e una volta che cresce oltre una certa dimensione dell'indice è diviso da x o y. E poiché un tale frammento ha una rappresentazione binaria (la posizione nella griglia è composta da due bit, il prossimo livello prossimo 2 bit e così via), una ricerca viene emessa dalla posizione e verrà risposto da qualsiasi shard hat che prefissa la posizione/griglia di risoluzione . Il sistema semplice funziona bene finora, ma al momento non viene utilizzato in modo produttivo.

Answer 3

Prova Cassandra + Solr. Questo potrebbe essere utile: http://digbigdata.com/geospatial-search-cassandra-datastax-enterprise/

saluti, Goutham Kumar