utilizzando RavenDB per inserimenti Bulk di dati

Question

Sto cercando di importare grandi quantità di dati (flusso Twitter a circa 20-25 tweet al secondo) in RavenDB per test e test di dati su larga scala. Ho qualche codice che sta scrivendo i dati abbastanza bene, ma dopo un po 'ho un errore:

non voglio compilare tutto il codice, ma qui è l'essenza di esso:

Open RavenDB Session 
Start reading data from Twitter Stream 
For each line, parse JSON into known C# object 
add item to RavenDB 
increment counter 
if counter % 25 = 0, save changes to RavenDB. 

Non ho provato quello che ha suggerito, perché dice di guardare modi diversi per farlo. Dovrei uccidere la mia sessione ogni 200 circa? C'è un modo per inserire una matrice di oggetti con Raven DB? Sto sbagliando tutto questo?

Answer 1

Due opzione:

• creare una nuova sessione berefore raggiunto il limite (25 richieste per ogni sessione è un buon valore)
• aumento DocumentSession.Advanced.MaxNumberOfRequests su un valore appropriato

In entrambi i casi funzionerà, sebbene il secondo approccio sia leggermente più veloce.

Modifica: Secondo il commento di Orens di seguito, in realtà è il primo approccio che è più veloce.