python抓取网站的图片并下载到本地的方法
作者：wickedvalley 发布时间：2022-05-19 23:45:08
标签：python,抓取,图片,下载,本地
实例如下所示：
#!/usr/bin/python
# -*- coding: UTF-8 -*-
import re
import urllib,urllib2;
#通过url获取网页
def getHtml(url):
# 要设置请求头，让服务器知道不是机器人
user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
headers = {'User-Agent': user_agent}
request=urllib2.Request(url,headers=headers);
page = urllib2.urlopen(request);
html = page.read()
return html
#通过正则表达式来获取图片地址，并下载到本地
def getImg(html):
reg = r'src="(.+?\.jpg)"'
imgre = re.compile(reg)
imglist = imgre.findall(html)
x = 0
for imgurl in imglist:
print imgurl;
#通过urlretrieve函数把数据下载到本地的D:\\images，所以你需要创建目录
urllib.urlretrieve(imgurl, 'D:\\images\\％s.jpg' ％ x)
x = x + 1
html = getHtml("http://www.qiushibaike.com/imgrank/")
getImg(html)
来源：https://blog.csdn.net/wickedvalley/article/details/51992245
0
投稿猜你喜欢
- 首先我们一起来看下 Character entities references （HTML Entities）和 Numeric Chara
CSS hack是指我们为了兼容各浏览器，而使用的特别的css定义技巧。这是国外摘来的一张CSS hack列表，显示了各浏览器对css ha- 来源:Chinaasp 之所以翻译这篇文章，是因为目前关于CGI安全性的文章都是拿Perl作为例子，而专门介绍ASP，PHP或者JSP安全性
- 有时候我不需要网络立即执行更改的数据。请问如何做到？ 用下列办法即可延时执行：<％@import&
- 修复Access数据库，我们一般使用微软Office 97中带的Access 97对数据库进行修复和整理。Access数据库被损坏分以下几种
- 在现在的项目里，不管是电商项目还是别的项目，在管理端都会有导出的功能，比方说订单表导出，用户表导出，业绩表导出。这些都需要提前生成excel
- 因为神奇的中文有时也是会遇到国外同学都不知道原因导致一些神奇滴问题，所以要用更神奇的英文来解决问题。Mac OS的一些：华文细黑：STHei
- 什么是pyc文件pyc是一种二进制文件，是由py文件经过编译后，生成的文件，是一种byte code，py文件变成pyc文件后，加载的速度有
- 刚刚登甲发来一个文章,看到只要一行代码,就可以把IE6弄死.<style>*{position:relative}&
- 装饰器简介：装饰器(decorator)是一种高级Python语法。装饰器可以对一个函数、方法或者类进行加工。在Python中，我们有多种方
- 之前在豆瓣上听到有友邻在抱怨卓越的配送速度慢得跟蜗牛一样，超过配送时间期限几天还没送到，当时不太相信，因为此前在卓越网上购买的物品基本上是在
- 采集开始第一步是分析要采集的页面。使用浏览器打开要采集的页面（如:http://sports.sina.com.cn/k/2008-09-1
- 本章来实现一下删除已上传文件，同时优化了一下第一章中的代码。废话少说，上代码得意1.调整列表页面list.jsp<％@ page co
- 本篇没有考虑异步，多线程及SQL注入WebDatabase 规范中说这份规范不再维护了，原因是同质化（几乎实现者都选择了Sqlite），且不
- 自己前端开发中常用到的一些技巧及问题解决方法，会常更新，希望对前端路上的朋友有帮助。1、文章标题列表中日期居右显示的方法(提供了两种方法，使
- “/xxxxx”应用程序中的服务器错误。 -------------------------------------------------
- 看了不少朋友的个人网站，有一个小问题，似乎很多朋友都忽略了，那就是版权声明的写法。虽然那只是一小行字，不过作为设计师也好，作为个人的爱好也好
- 本文介绍了一些JavaScript常用到得表单验证函数，方便大家使用。 判断是否为整数，是则返回true,否则返回falsefun
- 还是一个关于checkbox的一个普通的效果，就是根据你勾选的checkbox,列出你选择了哪些值演示代码：<!DOCTYPE htm
- 一、利用ASP和ADO实现数据库操作的工作流程ASP内嵌了五个对象Resquest、Response、Server、Seesion、Appl
