python chardet简单应用

importchardet

importurllib

#可根据需要，选择不同的数据

TestData=urllib.urlopen('http://www.baidu.com/').read()

printchardet.detect(TestData)

#运行结果：

#{'confidence':0.99,'encoding':'GB2312'}

importurllib

fromchardet.universaldetectorimportUniversalDetector

usock=urllib.urlopen('http://www.baidu.com/')

#创建一个检测对象

detector=UniversalDetector()

forlineinusock.readlines():

#分块进行测试，直到达到阈值

detector.feed(line)

ifdetector.done:break

#关闭检测对象

detector.close()

usock.close()

#输出检测结果

printdetector.result

#运行结果：

#{'confidence':0.99,'encoding':'GB2312'}