La stampa Python funziona in modo diverso su server diversi

Question

Quando provo a stampare una stringa unicode sul mio server dev, funziona correttamente ma il server di produzione solleva un'eccezione.

File "/home/user/twistedapp/server.py", line 97, in stringReceived 
    print "sent:" + json 
File "/usr/lib/python2.6/dist-packages/twisted/python/log.py", line 555, in write 
    d = (self.buf + data).split('\n') 
exceptions.UnicodeDecodeError: 'ascii' codec can't decode byte 0xd1 in position 28: ordinal not in range(128) 

In realtà è un'applicazione storta e stampa avanti per registrare il file.

repr() di stringhe uguali. Impostazioni locali impostate su en_US.UTF-8.

Sono presenti configurazioni necessarie per verificare che funzionino allo stesso modo su entrambi i server?

Answer 1

Unicode non è supportato dagli osservatori di registro incorporati di Twisted. Vedere http://twistedmatrix.com/trac/ticket/989 per i progressi sull'aggiunta di supporto per questo, o per vedere cosa si può fare per dare una mano.

Fino a quando # 989 non viene risolto e la correzione si trova in una versione Twisted su cui è distribuita l'applicazione, non registrare unicode. Registrare solo str.

Answer 2

print ing delle stringhe Unicode si basa su sys.stdout (standard output del processo) con una corretta attributo .encoding che Python può utilizzare per codificare la stringa unicode in una stringa di byte per eseguire la stampa desiderata - e che l'impostazione dipende dal modo il sistema operativo è impostato, in cui viene indirizzato l'output standard e così via.

Se non esiste un attributo di questo tipo, viene utilizzato il codice codificato predefinito ascii e, come si è visto, spesso non fornisce i risultati desiderati ;-).

È possibile controllare getattr(sys.stdout, 'encoding', None) per vedere se la codifica è lì (se lo è, è sufficiente tenere le dita incrociate che è corretto ... o, forse, provare qualche trucco pesantemente specifico per piattaforma da indovinare sul sistema corretto codifica da verificare ;-). Se non lo è, in generale, non esiste un modo affidabile o multipiattaforma per indovinare cosa potrebbe essere. È possibile provare 'utf8', la codifica universale che funziona in molti casi (sicuramente più di ascii fa ;-), ma è davvero un giro della ruota della roulette.

Per maggiore affidabilità, il programma dovrebbe avere il proprio file di configurazione per dirgli quale codifica di uscita utilizzare (magari con 'utf8' come predefinito se non diversamente specificato).

E 'anche meglio, per la portabilità, per svolgere la propria codifica, cioè, non

print someunicode 

ma piuttosto

print someunicode.encode(thecodec) 

e in realtà, se si preferisce avere in uscita incomplete di un incidente,

print someunicode.encode(thecodec, 'ignore') 

(che salta semplicemente n on-codificabili caratteri), o, in genere meglio,

print someunicode.encode(thecodec, 'replace') 

(che utilizza segnaposto punto interrogativo per i caratteri non codificabili).