解决python3爬虫无法显示中文的问题
作者：正义狂哥 发布时间：2022-11-27 15:18:59
标签：python3,爬虫,中文,乱码
有时候使用python从网站上爬数据的时候，如果数据里包含中文，有时候显示的却是如下所示...\xe4\xba\xba\xef\xbc\x8c\xe6...类似与国际化
解决方法：
import urllib.request
import sys
weburl="..."
webhead=...
req=urllib.request.Request(url=weburl,headers=webhead)
response=urllib.request.urlopen(req)
content = response.read()
#获得系统的编码
type = sys.getfilesystemencoding()
#设置爬出内容的编码
content = content.decode(type)
file = open("c。txt",'w',10000)
file.write(str(content))
file.close()
print(content)
来源：https://blog.csdn.net/zhengyikuangge/article/details/72773087
0
投稿猜你喜欢
- timeit.repeattimeit.repeat默认会执行3轮，每轮执行1000000次。返回每轮的总执行时间列表字典获取性能大家都知道
简述Matplotlib是一个基于python的2D画图库，能够用python脚本方便的画出折线图，直方图，功率谱图，散点图等常用图表，而且- 我们在开发程序的时候，有时候需要开发一些自动化的任务，执行完之后，将结果自动的发送一份邮件，python发送邮件使用smtplib模块，是一
- 这篇文章主要介绍了python线程join方法原理解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋
- Python装饰器语法糖代码示例####装饰器的固定格式##普通版本def timer(func): def inner(*ar
- 今天一个朋友给个需求： 来来 {'isOK': 1, 'isRunning': None, 'isE
- MySQL内建复制功能来优化可用性，在Soundbreak我们每天24小时不间断地播放实况音频和视频，所以对于MySQL的新增的复制特性，我
- 之前一直使用hdfs的命令进行hdfs操作，比如：hdfs dfs -ls /user/spark/hdfs dfs -get /user/
- 总结了5个关于css布局的常见问题，并附有解决方法，供参考。float的3像素问题及解决办法当使用float浮动容器后，在IE6下会产生3p
- 匿名函数匿名函数就是不需要显示式的指定函数名首先看一行代码：def calc(x,y): re
- 前言elasticsearch-dsl是基于elasticsearch-py封装实现的，提供了更简便的操作elasticsearch的方法。
- 感觉上次写的植物大战僵尸与俄罗斯方块的反应还不错，这次这个文章就更有动力了这次就写一个天天酷跑吧写出来的效果图就是这样了下面就更新一下全部的
- 本文实例讲述了python中list常用操作。分享给大家供大家参考。具体分析如下：1.定义list>>> li = [&q
- XA事务支持限于InnoDB存储引擎。MySQL XA实施是针对外部XA的，其中，MySQL服务器作为资源管理器，而客户端程序作为事务管理器
- 前言我第一次见到飞机大战是在我小学五年级下半学期的时候（2020年），这个游戏中可以说包含了几乎所有我目前可接触到的pygame知识。一、p
- 一、map函数作用：map主要作用是计算一个序列或者多个序列进行函数映射之后的值语法：map(function,iterable1,iter
- 一、简介主流被使用的地理坐标系并不统一，常用的有WGS84、GCJ02（火星坐标系）、BD09（百度坐标系）以及百度地图中保存矢量信息的we
- 常见的图片加密方法包括加密算法、水印、隐藏、压缩等。下面简要介绍一些常见的图片加密方法：加密算法加密算法是一种基于数学运算的加密方式，可对图
- 在WEB2.0这个词未出现之前，是没有所谓的WEB1.0之说的，那时候的互联网也是没有时代之分的，能上的网站不多，值得上的网站更不多，很多的
- 互联网上的每台计算机都有独一无二的编号，称为IP地址，每个合法的IP地址由“.”分开的4个数字组成，并且IP地址细分类型的话，可以分为“A”
