一则python3的简单爬虫代码
发布时间：2022-11-29 04:46:31
标签：python,爬虫
不得不说python的上手非常简单。在网上找了一下，大都是python2的帖子，于是随手写了个python3的。代码非常简单就不解释了，直接贴代码。
#test rdp
import urllib.request
import re<br>
#登录用的帐户信息
data={}
data['fromUrl']=''
data['fromUrlTemp']=''
data['loginId']='12345'
data['password']='12345'
user_agent='Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
#登录地址
#url='http://192.168.1.111:8080/loginCheck'
postdata = urllib.parse.urlencode(data)
postdata = postdata.encode('utf-8')
headers = { 'User-Agent' : user_agent }
#登录
res = urllib.request.urlopen(url,postdata)
#取得页面html<br>strResult=(res.read().decode('utf-8'))
#用正则表达式取出所有A标签
p = re.compile(r'<a href="(.*?)".*?>(.*?)</a>')
for m in p.finditer(strResult):
print (m.group(1))#group(1)是href里面的内容，group(2)是a标签里的文字
关于cookie、异常等处理看了一下，没有花时间去处理，毕竟只是想通过写爬虫来学习python。
0
投稿猜你喜欢
- php获取图片的exif信息，php自带一个exif_read_data函数可以用来读取图片的exif信息，代码来自php手册<?ph
- 假如你目前需要在Microsoft Access数据库中指示不存在数据，可以在“文本”或&l
- 说到运维报警，我觉得都可以写个长篇历史来详细解释了报警的前世来生，比如最早报警都是用邮件，但邮件实时性不高，比如下班回家总不能人一直盯着邮箱
1. 引言作为一名算法工程师，如何快速实现一个想法并验证它是否有效对日常工作至关重要。Python 是一个出色的工具，可以很方便地实现这一点- 使用递归实现words = ['giraffe', 'elephant', 'ant', &
- Python代码运行助手可以让你在线输入Python代码，然后通过本机运行的一个Python脚本来执行代码。原理如下：在网页输入代码：点击R
- 前言VScode是一个相当优秀的IDE，具备开源、跨平台、模块化、插件丰富、启动时间快、颜值高、可高度定制等等优秀的特质，不愧是微软爸爸的私
- jQuery由美国人John Resig创建，至今已吸引了来自世界各地的众多javascript高手加入其team，包括来自德国的J&
- 实例1：获取星期字符串程序读入一个表示星期几的数字（1~7)，输出对应的星期字符串名称。例如，输入 3，返回“星期三&a
- 前言：现在写爬虫，入门已经不是一件门槛很高的事情了，网上教程一大把，但很多爬虫新手在爬取数据的过程中依旧会遇到这样那样的问题。今天整理了部分
- 1、Pylint是什么pylint是一个Python源代码中查找bug的工具，能找出错误，和代码规范的运行。也就是你的代码有Error错误的
- 前言出发点，网上下了一批png，使用wxFormBuilder做软件工具栏的图标，原图做出来的效果这么大的一个图标让笔者差点就笑岔气了以前都
- 映射类型 — dict字典可用多种方式来创建:使用花括号内以逗号分隔键: 值对的方式: {‘jack
- 说明MySql社区版从5.7.11开始支持基于表的数据加密方案，模块名为keyring_file，支持加密整张表。这种是加密方式其实是基于文
- 前言：自增列可使用 auto_increment 来实现，当一个列被标识为 auto_increment 之后，在添加时如果不给此列设置任何
- 前言用 HTML5 的 Canvas 元素实现一个带有跳动效果的粒子动画。会用到 Canvas 的2D渲染上下文，通过 JavaScript
- 写作思路1、简述实现原理2、部分代码解析3、位置同步解析（①上下两屏位置同步②编辑屏位置保持不变）效果图如下：版本1：这就是我们常见的预览窗
- 在windows平台上使用pyhton编写语音识别程序需要用到speech模块，speech模块支持的主要功能有：文本合成语音，将键盘输入的
- pyserial模块封装了对串口的访问，兼容各种平台。安装pip insatll pyserial初始化简单初始化示例import seri
- 首先选择操作系统。由于ASP属于MS（Microsoft）的东西，所以我们要选择MS的操作系统，Windows 98以上就可以（
