python字符串编码识别模块chardet简单应用
作者：hebedich 发布时间：2021-10-03 15:09:57
标签：python,chardet
python的字符串编码识别模块（第三方库）：
官方地址： http://pypi.python.org/pypi/chardet
import chardet
import urllib
# 可根据需要，选择不同的数据
TestData = urllib.urlopen('http://www.baidu.com/').read()
print chardet.detect(TestData)
# 运行结果：
# {'confidence': 0.99, 'encoding': 'GB2312'}
运行结果表示有99％的概率认为这段代码是GB2312编码方式。
import urllib
from chardet.universaldetector import UniversalDetector
usock = urllib.urlopen('http://www.baidu.com/')
# 创建一个检测对象
detector = UniversalDetector()
for line in usock.readlines():
# 分块进行测试，直到达到阈值
detector.feed(line)
if detector.done: break
# 关闭检测对象
detector.close()
usock.close()
# 输出检测结果
print detector.result
# 运行结果：
# {'confidence': 0.99, 'encoding': 'GB2312'}
应用背景，如果要对一个大文件进行编码识别，使用这种高级的方法，可以只读一部，去判别编码方式从而提高检测速度。如果希望使用一个检测对象检测多个数据，在每次检测完，一定要运行一下detector.reset()。清除之前的数据。
以上所述就是本文的全部内容了，希望大家能够喜欢。
0
投稿猜你喜欢
- 一直以来，JS前端代码因为必须经过IE明文解析，某些加密的JS如：JScript.Encode也因为树大招风，早就被人破解了。还有些加密的手
前言前面两篇文章介绍了数据结构和算法的一些前置内容，这篇文章开始正式学习常见的数据结构，首先学习的就是栈（Stack）。什么是栈？栈全称为堆- 创建列表list( ) # 创造列表list(可迭代对象)# 将可迭代对象创造成列表切片索引：列表[a:b]切片索引赋值：列表[切片] =
- Python内建了map()和reduce()函数。如果你读过Google的那篇大名鼎鼎的论文“MapReduce: Simplified
- 全局变量与局部变量# num1是全局变量num1 = 1# num2是局部变量def func():num2 = 2在函数外（且不在函数里）
- asp之家注：也许你还没有接触过使用js来调用asp文件，也许你也不知道如何用JS调用asp文件，甚至你也不知道JS调用asp文件有什么好处
- mulLine = """Hello!!! Wellcome to Python's world! T
- 用Vue写了一个简单的时间钟，供大家参考，具体内容如下此时钟内容包括年月日及星期和时分秒。功能分析：1.年份，日期，时间的显示2.动态的变化
- $attrs和inheritAttrs用法$attrs属性解释：包含了父作用域中不作为组件 props 或自定义事件的 attribute
- python绘图的包大家应该不会陌生，但是，对图的常规设置不一定会知道（其实自己也是才知道的），比如：坐标轴的字体大小、颜色设置；标题的字体
- 详解python中的文件与目录操作一 获得当前路径1、代码1>>>import os>>>print(&
- MySQL 出现错误1418 的原因分析及解决方法具体错误： 使用mysql创建、调用存储过程，函数以及触发器的时候会有错误符号为
- 实现网页的键盘输入操作from selenium.webdriver.common.keys import Keys * 页有时需要将鼠标
- 1.连接查询作用:当查询结果的列来源于多张表时，需要将多张表连接成一个大的数据集，再选择合适的列返回2、连接类型内连接定义：内连接查询：查询
- 最近和一程序员合作项目。弄的我头都大了~埋怨我的CSS命名看不懂~得按照他的来。结果我打开他的页面，看了看,从头第一个开始就是content
- 如果你看到别人写trim函数是用循环而不用正则表达式来写，请不要取笑，也许，他们就是高手。如果你很自信你的trim函数效率很高，请看完本文再
- 目录一、pyecharts绘制饼图语法简介二、绘制普通饼图三、绘制圆环图四、绘制饼图-玫瑰图一、pyecharts绘制饼图语法简介饼图主要用
- 这里提供三种方法：1,使用正则表达式Function regKillHTML(str) &nb
- 本文实例讲述了python 装饰器功能与用法。分享给大家供大家参考，具体如下：1、必备#### 第一波 ####def foo(): &nb
- 要想成功的进行字符串的匹配需要使用到正则表达式模块，正则表达式匹配规则以及需要被匹配的字符串。在这三个条件中，模块与字符串都是准备好的，只有
