Python使用urllib模块的urlopen超时问题解决方法
作者：junjie 发布时间：2023-12-16 02:49:50
标签：Python,urllib,urlopen,超时
在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。
于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间
首先：
import socket
然后：
socket.setdefaulttimeout(60)
设置全局的超时时间为60s。
之后再执行脚本的时候就没有什么大问题了。
0
投稿猜你喜欢
- 指令和程序计算机的硬件系统通常由五大部件构成，包括：运算器、控制器、存储器、输入设备和输出设备。其中，运算器和控制器放在一起就是我们通常所说
- 每每见到这三个函数，我都会很懵，一定要到网上搜搜；今天，恰巧又见到了它们，所以想必是时候为它们做个笔记啦1.slice（数组）用法：arra
1.安装pip我的个人桌面系统用的linuxmint，系统默认没有安装pip，考虑到后面安装requests模块使用pip，所以我这里第一步- 【前言】一般我们在使用ElementUI组件库的时候，在使用el-table时，背景通常是白色的，但有时候不能满足我们的实际需求，我想让el
- 1、在MySQL中要修改全局（global）变量，有两种方法：方法一，修改my.ini配置文件，如果要设置全局变量最简单的方式是在my.in
- ---在仓储管理中经常会碰到的一个问题 一、关于LIFO与FIFO的简单说明 ---FIFO: First in, First out.先进
- 首先要说明的是，这个标题有点标题党的意思，这个 bug 也存在于 IE8 下，在 IE6 和 IE7 下正常。之前写过两篇关于 I
- 实例如下所示：import pandas as pdimport reimport mathdframe1 = pd.read_excel(
- 对于React，Vue构建的单页面应用老说，SEO是一个众所周知的问题。服务端渲染(SSR-server Side Render)是目前看来
- 一、概述现有一个用户表，需要将表数据写入到excel中。环境说明mysql版本：5.7端口：3306数据库：test表名：users表结构如
- 实现代码一、#!/usr/bin/pythonx,y=9,9 &nbs
- 概述python开发过程中，我们可能需要同时开发多款应用，这些应用可能公用同一个版本的Python程序，但是使用不同版本的第三方库，比如A应
- 目录一、数据库瓶颈二、分库分表2、水平分表3、垂直分库4、垂直分表三、分库分表工具四、分库分表步骤五、分库分表问题1、非partition
- 一、内容简介使用while循环编写重复执行的语句使用哨兵值控制循环使用for循环实现计数器控制使用break、continue控制循环二、w
- 一、元素偏移量 offset 系列offset 翻译过来就是偏移量， 我们使用 offset 系列相关属性可以动态的得到该元素的位置（偏移）
- 本篇文章给大家带来的内容是关于Python如何筛选序列中的元素 ，有一定的参考价值，有需要的朋友可以参考一下，希望对你有所帮助。1、需求序列
- 这里需要用到一个Django插件：django-pagination安装打开控制台 输入pip install dj-pagination实
- 基础知识优先使用异常捕获LBYL(look before you leap): 在执行一个可能出错的操作时，先做一些关键的条件判断，仅当满足
- 最近帮人做了个贪吃蛇的游戏（交作业用），很简单，界面如下：开始界面：游戏中界面：是不是很简单、朴素。（欢迎大家访问GitHub）游戏是基于P
- 本文实例讲述了centos6使用docker部署redis主从数据库操作。分享给大家供大家参考，具体如下：目录结构：/redis
