'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
2017-10-29 12:56
441 查看
Python 里面的编码和解码也就是 unicode 和 str 这两种形式的相互转化.
编码是 unicode -> str,相反的,解码就 是 str -> unicode剩下的问题就是确定何时需要进行编码或者解码了.
关于文件开头的"编码指示",也就是
# -*- coding: -*-这个语句。Python 默认脚本文件都是
UTF-8编码的,当文件中有
非 UTF-8编码范围内的字符的时候就要使用"编码指示"来修正. 关于
sys.defaultencoding,这个在解码没有明确指明解码方式的时候使用。比如我有如下代码:
#! /usr/bin/env python # -*- coding: utf-8 -*- s = '中文' # 注意这里的 str 是 str 类型的,而不是 unicode s.encode('gb18030')这句代码将 s 重新编码为
gb18030的格式,即进行
unicode -> str的转换。因为 s 本身就是
str类型的,因此 Python 会自动的先将 s 解码为
unicode,然后再编码成
gb18030。因为解码是python自动进行的,我们没有指明解码方式,
python就会使用
sys.defaultencoding指明的方式来解码。很多情况下 sys.defaultencoding 是 ANSCII,如果 s 不是这个类型就会出错。
拿上面的情况来说,我的
sys.defaultencoding是
anscii,而 s 的编码方式和文件的编码方式一致,是
utf8的,所以出错了: UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
在解决错误之前,首先要了解unicode和utf-8的区别。
unicode指的是万国码,是一种“字码表”。而utf-8是这种字码表储存的编码方法。unicode不一定要由utf-8这种方式编成
bytecode储存,也可以使用utf-16,utf-7等其他方式。目前大多都以utf-8的方式来变成
bytecode。
python中字符串类型分为
byte string和
unicode string两种。
如果在python文件中指定编码方式为
utf-8(#coding=utf-8),那么所有带中文的字符串都会被认为是
utf-8编码的
byte string(例如:mystr="你好"),但是在函数中所产生的字符串则被认为是
unicode string
问题就出在这边,
unicode string和
byte string是不可以混合使用的,一旦混合使用了,就会产生这样的错误。例如:
self.response.out.write("你好"+self.request.get("argu"))
其中,"你好"被认为是
byte string,而
self.request.get("argu")的返回值被认为是
unicode string。由于预设的解码器是
ascii,所以就不能识别中文
byte string。然后就报错了。
以下有两个解决方法:
第一种,是明确的指示出 s 的编码方式
#! /usr/bin/env python # -*- coding: utf-8 -*- s = '中文' s.decode('utf-8').encode('gb18030')
第二种,更改
sys.defaultencoding为文件的编码方式
#! /usr/bin/env python # -*- coding: utf-8 -*- import sys #要重新载入sys。因为 Python 初始化后会删除 sys.setdefaultencoding 这个方 法 reload(sys) sys.setdefaultencoding('utf-8')总结一下为什么要这么写的原因:
1. 当取回来的数据与你当前脚本中声明的编码不一致时就要做编码转换
2.在编码转换时首先要将该数据以自身编码的格式换成unicode码,再将这个unicode按utf8编码
3.为什么我的浏览器会传回gb2312的编码数据到服务器,这应该和客户端的系统编码有关系
作者:东皇Amrzs
链接:http://www.jianshu.com/p/5017d8342dd2
來源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
相关文章推荐
- 【Python】'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
- 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
- 解决Python字符串处理出现错误UnicodeDecodeError: ‘ascii’ codec can’t decode byte 0xe4 in position 108: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 1: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 9: ordinal not in range(128)
- 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)
- UnicodeDecodeError:'ascii' codec can't decode byte 0xe4 in position 25: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 87: ordinal not in range(128)
- 解决UnicodeDecodeError: ‘ascii’ codec can’t decode byte 0xe5 in position 108: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe6 in position 117: ordinal not in range(128)
- 解决UnicodeDecodeError: 'ascii' codec can't decode byte 0x8b in position 6: ordinal not in range(128)
- 解决unicodedecodeerror ascii codec can’t decode byte 0xd7 in position 9 ordinal not in range(128)
- 'ascii' codec can't decode byte 0xc4 in position 27: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xd3 in position 1: ordinal not in range(128)
- python 处理中文时出现的错误'ascii' codec can't decode byte 0xe9 in position 0: ordinal not in range(128)" 解决方法
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xe5 in position 0: ordinal not in range(128)
- UnicodeDecodeError: 'ascii' codec can't decode byte 0xb7 in position 7: ordinal not in range(128)
- 【python】ascii codec can't decode byte 0xe8 in position 0:ordinal not in range(128)