Ho bisogno di DOWNLOAD multiparte da Amazon S3 per file enormi

Question

So che Amazon S3 ha aggiunto il caricamento multiparte per file enormi. È fantastico. Ciò di cui ho bisogno è anche una funzionalità simile sul lato client per i clienti che ottengono in parte il download di un file gigabyte plus e hanno errori.

Mi rendo conto che i browser hanno un certo livello di riprogrammazione e ripristino incorporato, ma quando si parla di file enormi mi piacerebbe essere in grado di riprendere da dove si erano interrotti indipendentemente dal tipo di errore.

Qualche idea?

Grazie, Brian

Answer 1

S3 supporta la "Gamma" standard HTTP intestazione se si vuole costruire la vostra soluzione.

S3 Getting Objects

Answer 2

io uso aria2c. Per i contenuti privati, è possibile utilizzare "GetPreSignedUrlRequest" per generare URL privati ​​temporanei che è possibile passare a aria2c

Answer 3

Appena aggiornato per la situazione corrente, S3 supporta nativamente GET multipart e PUT. https://www.youtube.com/watch?v=uXHw0Xae2ww (zip avanti fino alle 26:00).

Answer 4

NOTA: Per gli utenti di Ruby solo

Prova aws-sdk gemma da Ruby, e scarica

object = AWS::S3::Object.new(...) 
object.download_file('path/to/file.rb') 

Perché scaricare un file di grandi dimensioni con più parti per impostazione predefinita.

file più grandi di 5 MB vengono scaricati utilizzando il metodo più parti

http://docs.aws.amazon.com/sdkforruby/api/Aws/S3/Object.html#download_file-instance_method