Come impostare il timeout per urlfetch in Google App Engine?

Question

Sto provando ad avere Django (in cima a GAE) per recuperare i dati da un altro servizio web. Sono spesso colpito con errore come questo:

ApplicationError: 2 timed out Request

Method: GET

Request URL: http://localhost:8080/

Exception Type: DownloadError

Exception Value: ApplicationError: 2 timed out

Exception Location: /google_appengine/google/appengine/api/urlfetch.py in _get_fetch_result, line 325

Ci si sente come se essa scada solo dopo 12 secondi (non sono sicuro, ma è davvero breve).

Domanda: come posso impostare un timeout più lungo?

Answer 1

È possibile impostarlo utilizzando l'argomento deadline dello fetch function. Da the docs:

The deadline can be up to a maximum of 60 seconds for request handlers and 10 minutes for tasks queue and cron job handlers. If deadline is None, the deadline is set to 5 seconds.

---

Edit: assomiglia a questo ora è cambiato. Da here:

You can set a deadline for a request, the most amount of time the service will wait for a response. By default, the deadline for a fetch is 5 seconds. You can adjust the default deadline for requests using the urlfetch.set_default_fetch_deadline() function.

E this page elenca i valori di timeout di default:

Currently, there are several errors named DeadlineExceededError for the Python runtime:

• google.appengine.runtime.DeadlineExceededError : raised if the overall request times out, typically after 60 seconds, or 10 minutes for task queue requests.
• google.appengine.runtime.apiproxy_errors.DeadlineExceededError : raised if an RPC exceeded its deadline. This is typically 5 seconds, but it is settable for some APIs using the 'deadline' option.
• google.appengine.api.urlfetch_errors.DeadlineExceededError : raised if the URLFetch times out.

Answer 2

sembra breve, ma si deve sapere che il timeout di una richiesta su GAE è di circa 30 secondi. Poiché probabilmente hai bisogno di fare alcune operazioni sulla risposta del tuo urlfetch, non c'è bisogno di avere un timeout più di 10 secondi, penso.

Answer 3

Considerando che questa è una domanda Python, ho pensato di fornire una risposta Python per chiunque si imbattesse in questo problema.

Basta importare urlfetch e quindi definire una scadenza prima di fare qualsiasi altra cosa nel codice:

from google.appengine.api import urlfetch 

urlfetch.set_default_fetch_deadline(60) 

Answer 4

Per Go, si potrebbe desiderare di provare sotto il codice.

// createClient is urlfetch.Client with Deadline 
func createClient(context appengine.Context, t time.Duration) *http.Client { 
    return &http.Client{ 
     Transport: &urlfetch.Transport{ 
      Context: context, 
      Deadline: t, 
     }, 
    } 
} 

Ecco come utilizzarlo.

// urlfetch 
client := createClient(c, time.Second*60)