python3判断url链接是否为404的方法
作者：iszzs 发布时间：2021-11-12 15:17:54
标签：python3,url,404
本文实例为大家分享了python3判断url链接是否为404的具体代码，供大家参考，具体内容如下
import pymysql
import threading
import time
import urllib
import requests
# 打开数据库连接
db = pymysql.connect("192.168.0.*", "username", "password", "databasename")
# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()
# SQL 查询语句
sql = "SELECT sku,url_6 FROM url_new where flag_6 is null and url_6<>'' "
# 执行SQL语句
cursor.execute(sql)
# 获取所有记录列表
results = cursor.fetchall()
num = 0
for row in results:
sku = row[0]
url = row[1]
html = requests.head(url) # 用head方法去请求资源头
re=html.status_code
num = num + 1
print(num,re)
if re == 200:
sql_2 = "UPDATE url_new SET flag_6 = 0 WHERE sku = '％s'" ％ sku
try:
# 执行SQL语句
cursor.execute(sql_2)
#print(cursor.rowcount)
except Exception as e:
print(e)
conn.rollback()
if re == 404:
sql_3 = "UPDATE url_new SET flag_6 = 1 WHERE sku = '％s'" ％ sku
try:
# 执行SQL语句
cursor.execute(sql_3)
print(cursor.rowcount)
except Exception as e:
print(e)
conn.rollback()
db.commit()
db.close()
来源：https://blog.csdn.net/u013091109/article/details/80737422
0
投稿猜你喜欢
为什么在facebook交友会更容易？facebook与传统的BSP（Blog Service Provider）到底有什么不同？是因为它有- 本文中，abigale代表查询字符串，ada代表数据表名，alice代表字段名。技巧一：问题类型：ACCESS数据库字段中含有日文片假名或其
- 目录mysql主从复制mysql主从复制的方式mysql主从复制的原理mysql的主从配置的具体实现方式1、 Master配置2、 Slav
- Python特别灵活，肯定方法不止一种，这里介绍一种我觉得比较简单的方法。如下图，使用x == np.max(x) 获得一个掩模矩阵，然后使
- Context 背景 和 适用场景Context 的背景Golang 在 1.6.2 的时候还没有自己的 context，在1.7的版本中就
- JS 添加千分位，测试可以使用<script language="javascript" type="t
- Python适配器模式，代码，思考等# -*- coding: utf-8 -*-# author：baoshanclass Compute
- matplotlib简介如果你在大学里参加过数学建模竞赛或者是用过MATLAB的话，相比会对这一款软件中的画图功能印象深刻。MATLAB可以
- 前言ThinkPHP出于安全的考虑增加了表单令牌Token，由于通过Ajax异步更新数据仅仅部分页面刷新数据，就导致了令牌Token不能得到
- 守护进程（daemon）是指在UNIX或其他多任务操作系统中在后台执行的电脑程序，并不会接受电脑用户的直接操控。此类程序会被以进程的形式初始
- 一、先进行剪切操作圆形区域占图片可能不多，多余的部分不要。看下图。只要纽扣电池内部和少许的边缘部分，其余黑色背景部分不需要。先沿着纽扣电池的
- 1 与达尔文对话140年前，1858年7月1日，达尔文在英伦岛发表了自己有关自然选择的杰出论文。他提出，生物的发展规律是物竞天择。经过物竞，
- 【flask-socektio】之前不知道在哪个场合下提到过如何从web后台向前台推送消息。听闻了反向ajax技术这种模式之后，大呼神奇，试
- 1、使用ImageField先安装pillow模块pip install pillow2、在app的models中设置class Image
- 要写爬虫爬取大量的数据，就会面临ip被封的问题，虽然可以通过设置延时的方法来延缓对网站的访问，但是一旦访问次数过多仍然会面临ip被封的风险，
- 目录一、前言二、方法1、代码2、运行一、前言SpringBoot作为后端开发框架，有强大且方便的处理能力。但是作为一个结合数据分析+前台展示
- 在我的博客上，以前我经常谈到SQL Serverl里的书签查找，还有它们带来的很多问题。在今天的文章里，我想从性能角度进一步谈下书签查找，还
- 本文实例为大家分享了Vue.js框架实现购物车的具体代码，供大家参考，具体内容如下<!DOCTYPE html><html
- 事务的实现redo log保证事务的持久性，undo log用来帮助事务回滚及MVCC的功能。InnoDB存储引擎体系结构redo logW
- Tips：微信小程序可以在HbuilderX用HTML标签（如Ddiv、span等）写前端代码，也可以用微信小程序语法写（view、swip
