पायथन - 'ascii' कोडेक बाइट डीकोड नहीं कर सकता

Question

मैं HTML रिपोर्ट बनाने के लिए पायथन 2.6 और Jinja2 का उपयोग कर रहा हूं। मैं टेम्पलेट को उनके द्वारा कई परिणामों और टेम्पलेट लूप प्रदान करता हूं और एचटीएमएल टेबल

टेम्पलेट.रेन्डर को कॉल करते समय, अचानक मुझे यह त्रुटि मिलनी शुरू हो गई है।

<td>{{result.result_str}}</td> 
UnicodeDecodeError: 'ascii' codec can't decode byte 0xc4 in position 0: ordinal not in range(128) 

अजीब बात है, भले ही मैं हर परिणाम के लिए "abc" की तरह एक सरल ASCII स्ट्रिंग के लिए result.result_str निर्धारित करते हैं, मैं अभी भी यह त्रुटि देख रहा हूँ, है। मैं Jinja2 और पायथन के लिए नया हूं और मूल कारणों को पाने के लिए समस्या की जांच के बारे में किसी भी विचार की सराहना करता हूं।

Answer 1

यदि आपको "एबीसी" जैसी स्ट्रिंग के साथ कोई त्रुटि मिलती है, तो शायद गैर-ASCII वर्ण कहीं और है। शायद टेम्पलेट स्रोत में?

किसी भी मामले में, इस तरह की समस्याओं से बचने के लिए अपने आवेदन में यूनिकोड स्ट्रिंग का उपयोग करें। यदि आपका डेटा स्रोत आपको बाइट स्ट्रिंग प्रदान करता है, तो यूटीएफ -8 में स्ट्रिंग एन्कोड किए जाने पर आपको byte_string.decode('utf-8') के साथ यूनिकोड स्ट्रिंग मिलती है। यदि आपका स्रोत एक फ़ाइल है, तो कोडेक्स मॉड्यूल में StreamReader कक्षा का उपयोग करें।

आप यूनिकोड तार और नियमित रूप से तार के बीच अंतर के बारे में अनिश्चित हैं, तो इस पढ़ें: http://www.joelonsoftware.com/articles/Unicode.html

Answer 2

ASCII 7-बिट कोड है। मूल्य 0xC4 7 बिट्स में संग्रहीत नहीं किया जा सकता है। इसलिए, आप उस डेटा के लिए गलत एन्कोडिंग का उपयोग कर रहे हैं।

Answer 3

से http://jinja.pocoo.org/docs/api/#unicode

Jinja2 यूनिकोड उपयोग कर रहा है आंतरिक रूप से जिसका अर्थ है आप यूनिकोड के लिए वस्तुओं पारित करने के लिए है कि रेंडर फ़ंक्शन या बाइटस्ट्रिंग्स जिनमें केवल ASCII वर्ण होते हैं।

तो जहां भी आप result.result_str सेट करते हैं, आपको इसे यूनिकोड बनाना होगा, उदा।

result.result_str = unicode(my_string_variable, "utf8") 

(यदि आपका बाइट्स UTF8 गया इनकोडिंग यूनिकोड)

या

result.result_str = u"my string" 

Answer 4

सरल तार UTF-8 वर्ण बाइट्स हो सकती है, लेकिन वे प्रकार यूनिकोड के नहीं हैं। इसे "डीकोड" द्वारा तय किया जा सकता है जो स्ट्र को यूनिकोड में परिवर्तित करता है। पाइथन 2.5.5 में काम करता है।

my_string_variable.decode ("UTF8")

Answer 5

कोशिश में जोड़ने के लिए:

import sys 
reload(sys) 
sys.setdefaultencoding('utf-8') 

यह मेरी समस्या नहीं है, अच्छी किस्मत तय की।

Answer 6

या फिर आप अपने कंसोल में

export LANG='en_US.UTF-8' 

ऐसा कर सकते हैं जहां स्क्रिप्ट चलाने।

Answer 7

बस जो फ़ाइलें HTML में Jinja2 से उत्पादन की बचत होती है कोड का एक टुकड़ा में एक ही समस्या का सामना करना पड़ा:

with open(path, 'wb') as fh: 
    fh.write(template.render(...)) 

यह Jinja2 दोष आसान है, हालांकि वास्तविक समस्या पायथन के open() के रूप में कौन सा संस्करण के 2.7 नहीं करता है यूटीएफ -8 का समर्थन नहीं करते हैं। फिक्स उतना सरल है जितना:

import codecs 
with codecs.open(path, 'wb', 'utf-8') as fh: 
    fh.write(template.render(...))