python检查URL是否正常访问的小技巧
作者：程序猿全敏 发布时间：2022-02-23 09:23:56
标签：python,URL
今天，项目经理问我一个问题，问我这里有2000个URL要检查是否能正常打开，其实我是拒绝的，我知道因为要写代码了，正好学了点Python，一想，python处理起来容易，就选了python，开始把思路想好：
1.首先2000个URL。可以放在一个txt文本内
2.通过python 把内容内的URL一条一条放进数组内
3.打开一个模拟的浏览器，进行访问。
4.如果正常访问就输出正常，错误就输出错误
直接简单粗暴甩代码。因为涉及到隐私，图片打了码
import urllib.request
import time
opener = urllib.request.build_opener()
opener.addheaders = [('User-agent', 'Mozilla/49.0.2')]
#这个是你放网址的文件名，改过来就可以了
file = open('test.txt')
lines = file.readlines()
aa=[]
for line in lines:
temp=line.replace('\n','')
aa.append(temp)
print(aa)
print('开始检查：')
for a in aa:
tempUrl = a
try :
opener.open(tempUrl)
print(tempUrl+'没问题')
except urllib.error.HTTPError:
print(tempUrl+'=访问页面出错')
time.sleep(2)
except urllib.error.URLError:
print(tempUrl+'=访问页面出错')
time.sleep(2)
time.sleep(0.1)
效果图：
来源：http://blog.csdn.net/u010798367/article/details/53008439
0
投稿猜你喜欢
导言在上两节教程中，我们看到了如何使用TemplateField来自定义GridView和DetailsView的输入。TemplateFi- WordPress 3.0 引入导航菜单功能, 让页面的导航和链接的管理变得简单易用. WP 向用户提供了菜单管理页面和多种调用方法, 我们
- 这个间歇性向上滚动js代码很适合做广告展示，友情链接等等。与平常的无缝向上连续滚动不同的是它每滚动一个就会停顿一会儿。<!DOCTYP
- html部分<!DOCTYPE html><html lang="en"><head>
- "合成大西瓜"这个游戏在年前很火热，还上过微博热搜，最近便玩了一阵还挺有意思的,所以研究了一下小球碰撞原理,自己亲自手写
- 模态框Bootstrap ModalBootstrap 的模态框使用Bootstrap 的前端应该都接触过。本文记录一下今天使用时遇到的 B
- 由于需要，这会儿需要卸载掉本机上的oracle 11g数据库（我是在Windows 7系统上装的），在网上搜的了挺多方法的，有些说的不清楚。
- 在做项目的时候因为数据比较多，一次性全部渲染的话会花费较多的时间，所以，想到每一次渲染10条数据也想过每一次获取十条数据然后显示就行了，就目
- HTML5真的是很强大，前端时间看到一个canvas实现九宫格的密码解锁。今天抽出时间模仿了一个，特定分享一下！效果截图如下：效果看起来还不
- 本文实例讲述了Symfony2实现从数据库获取数据的方法。分享给大家供大家参考，具体如下：假设有一张表：test, 字段：name,colo
- 1. 根据字符串名称 动态调用 python文件内的方法eval("function_name")(参数)2. 根据字符
- pip install *** :Cannot connect to proxy在使用pip install 安装任何新的包都会出现下面错误
- 1、 isalnum() :判断字符串所有的字符都是字母或者数字。返回true和falseIn [1]: str1='jiangwe
- 本文实例讲述了JS获得选取checkbox整行数据的方法。分享给大家供大家参考。具体实现方法如下：<html><head&
- 前言Python提供了多个内置模块用于操作日期时间，像 calendar，time，datetime。time模块提供的接口与C标准库 ti
- 我就废话不多说了，还是直接看代码吧！a = [1, 2, 3, 4, 5, 6, 7, 6, 5, 4, 3, 2, 1]b = ['
- 目录一、 环境准备：1.docker环境2.安装mariadb数据库二、ORM1.ORM简介2.django配置数据库第一种方式：第二种方式
- 执行文件和目标导入模块在同一目录直接import比如我要在ma_main.py中导入env包中的make_env.py文件, 从而读取其中的
- 前言最近因为线上alwayson环境的一个数据库上使用内存表。经过大概一个星期监控程序发现了一个非常严重问题这个数据库的日志文件不会截断，已
- python 代码如下：# -*- coding:utf-8 -*-import pandas as pdimport pymysqlimp
