python抓取网站的图片并下载到本地的方法
作者：wickedvalley 发布时间：2022-05-19 23:45:08
标签：python,抓取,图片,下载,本地
实例如下所示：
#!/usr/bin/python
# -*- coding: UTF-8 -*-
import re
import urllib,urllib2;
#通过url获取网页
def getHtml(url):
# 要设置请求头，让服务器知道不是机器人
user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
headers = {'User-Agent': user_agent}
request=urllib2.Request(url,headers=headers);
page = urllib2.urlopen(request);
html = page.read()
return html
#通过正则表达式来获取图片地址，并下载到本地
def getImg(html):
reg = r'src="(.+?\.jpg)"'
imgre = re.compile(reg)
imglist = imgre.findall(html)
x = 0
for imgurl in imglist:
print imgurl;
#通过urlretrieve函数把数据下载到本地的D:\\images，所以你需要创建目录
urllib.urlretrieve(imgurl, 'D:\\images\\％s.jpg' ％ x)
x = x + 1
html = getHtml("http://www.qiushibaike.com/imgrank/")
getImg(html)
来源：https://blog.csdn.net/wickedvalley/article/details/51992245
0
投稿猜你喜欢
- 什么是修改？在SQL中的基本操作就是增删改查，查询语句不会对数据库中的数据进行修改。而其余的三种操作都会对数据库进行修改，不管是什么修改，我
- DJANGO_SETTINGS_MODULE使用Django时要通知Django当前使用的是哪个配置文件。可以改变环境变量 DJANGO_S
- Django中如何在Model保存前做一定的固定操作，比如写一句日志？关键词: 信号利用Django的Model的Signal Dispat
- 本文实例讲述了PHP截取指定图片大小的方法。分享给大家供大家参考。具体分析如下：imagecopyresampled($newim, $im
- 这句话后面的1200是什么单位来的啊?delete from online where datediff(""s&quo
difflib模块提供的类和方法用来进行序列的差异化比较，它能够比对文件并生成差异结果文本或者html格式的差异化比较页面，如果需要比较目录- 本文实例讲述了PHP中PDO事务处理操作。分享给大家供大家参考，具体如下：概要：将多条sql操作（增删改）作为一个操作单元，要么都成功，要么
- 首先打开网站https://www.zymk.cn/1/37988.html打开开发者工具选择XHR标签页，没有找到什么再查看一下这些图片的
- RPA流程自动化过程中，遇到时间的相关操作时，可以调用datetime库的一些方法进行处理。datetime 是 Python 处理日期和时
- 前言首先来讲一下服务端渲染，直白的说就是在服务端拿数据进行解析渲染，直接生成html片段返回给前端。具体用法也有很多种比如：传统的服务端模板
- 本文实例讲述了Python3.5常见内置方法参数用法。分享给大家供大家参考，具体如下：Python的内置方法参数详解网站为：https://
- requests库安装和导入第一步：cmd打开命令行，使用如下命令安装requests库。pip install requests由于我的安
- isU是大小写分的意思，这里s还有则不包括换行符而U是反转了匹配数量的值使其不是默认的重复,大概就是这样了个体我们看文章。正则后面的/(.*
- 用户输入1、使用input来等待用户输入。如 username = input('username:') password
- 前言相信大家都应该有所体会，在平时经常会遇到处理 Excel 表格数据的情况，人工处理起来实在是太麻烦了，我们可以使用 Python 来解决
- 将mat文件转为png花费了很大力气做这件事，总是出现各种错误，现在终于解决了from PIL import Imageimport mat
- 目录前言初始化项目设计代码实现按需加载播放音频录音长按事件运行调试总结前言相信很多养猫的人都很想跟自己的猫进行沟通，当猫咪发出各种不同声音的
- 想要利用Python来操作word文档可以使用docx模块.安装: pip install python-docxfrom docx imp
- CREATE TABLE table1( [ID] [bigint] IDENTITY(1,1) NOT NULL, [Name] [nva
- 很多年以前，面对上古时代遗留的 HTML 发出的腐臭，我捂住鼻子唉声叹气。刚练熟 web 标准的我，恨不得寝其尸食其肉，把一切推翻重来。但经
