python爬虫获取百度首页内容教学
作者：1002002100a 发布时间：2022-12-16 07:02:00
标签：python,爬虫,百度
由传智播客教程整理，我们这里使用的是python2.7.x版本，就是2.7之后的版本，因为python3的改动略大，我们这里不用它。现在我们尝试一下url和网络爬虫配合的关系，爬浏览器首页信息。
1、首先我们创建一个urllib2_test01.py，然后输入以下代码：
2、最简单的获取一个url的信息代码居然只需要4行，执行写的python代码：
3、之后我们会看到一下的结果
4、
实际上，如果我们在浏览器上打开网页主页的话，右键选择“查看源代码”，你会发现，跟我们刚打印出来的是一模一样的。也就是说，上面的4行代码就已经帮我们把百度的首页和全部代码爬了下来了 。
5、下面我们介绍一下这四行代码，第一行如下图，这个就是将urllib2组件进入进来，供给我们使用。
6、图片下面这步骤是调用urllib2库中的urlopen方法，该方法接受一个url地址，然后将请求后的得到的回应封装到一个叫respones对象当中。
7、最后这里，是调用response对象的read（）方法，将请求的回应内容以字符串的形式给html变量。最后的print html就是将字符串打出来，所以说一个基本的url请求是对应的python代码是很简单的。
总结：以上就是关于利用python爬虫获取百度信息的步骤内容，感谢大家的学习和对脚本之家的支持。
来源：https://jingyan.baidu.com/article/19020a0a4d81ba529d2842a1.html
0
投稿猜你喜欢
在网上查了部分资料但是发现粘上去的代码都存在问题，无奈只好自己修改了一下，代码如下： 如下代码能正常运行，都是网上查找资料最后拼凑总结出来的- python是支持多线程的，主要是通过thread和threading这两个模块来实现的。thread模块是比较底层的模块，th
- 链接中的例子是一些脚本攻击相关的内容，有时间的朋友可以点开看看。 1.不要相信Request.QueryString: 相信在asp时代，这
- python加密打包程序加密方式：将py文件转为pyd格式安装easycython模块 pip install easycython使用ea
- 用于加密相关的操作，3.x里代替了md5模块和sha模块，主要提供 SHA1, SHA224, SHA256, SHA384, SHA512
- 在项目开发过程中加载、启动、下载项目难免会用到进度条，如何使用Python实现进度条呢？这里为小伙伴们分享四种Python实现进度条的库：P
- 本文实例讲述了Python异常模块traceback用法。分享给大家供大家参考，具体如下：traceback模块被用来跟踪异常返回信息. 如
- 前言在写程序时，我们会经常碰到程序出现异常，这时候我们就不得不处理这些异常，以保证程序的健壮性。处理异常的版本有以下几种，你通常的做法是哪种
- 如下所示：# -*- coding: utf-8 -*-#简述：一个整数，它加上100和加上268后都是一个完全平方数#提问：请问该数是多少
- 常见的图片加密方法包括加密算法、水印、隐藏、压缩等。下面简要介绍一些常见的图片加密方法：加密算法加密算法是一种基于数学运算的加密方式，可对图
- 其实golang用一个函数可以构建一个并发队列，现在编写一个灵活可控的队列程序先定义一个工作type Worker struct { &nb
- 单例模式单例是一种创建型设计模式， 让你能够保证一个类只有一个实例， 并提供一个访问该实例的全局节点。单例拥有与全局变量相同的优缺点。 尽管
- 前言众所周知在java或php等很多面向对象的语言中, 异常处理是依靠throw、catch来进行的。在go语言中，panic和recove
- 前言项目中大量用到图片加载，由于图片太大，加载速度很慢，因此需要对文件进行统一压缩一：导入包from PIL import Imageimp
- 1、解决方案mysql是不支持跨库连接的，如果我们实在要连接的话可以用dblink方式。解释：dblink就是我们在创建表的时候连接到我们的
- 一、随机数种子为什么要提出随机数种子呢？咱们前面提到过了,随机数均是模拟出来的, 想要模拟的比较真实,就需要变换种子函数内的数值,一般以时间
- 什么是反射在Python中，反射是指通过一组内置的函数和语句，在运行时动态地访问、检查和修改对象的属性、方法和类信息的机制。Python中的
- 1. union合并查询结果集查询工作岗位是 MANAGER 和 SALESMAN 的员工？mysql> select ename,
- 很多时候，我发现自己需要进行生成报告、输出文件或字符串的任务。它们或多或少都会遵循某种模式，通常这些模式是如此相似，以至于我们希望拥有一个可
- 滑动验证码介绍本篇涉及到的验证码为滑动验证码，不同于极验证，本验证码难度略低，需要的将滑块拖动到矩形区域右侧即可完成。这类验证码不常见了，官
