Python urlopen 使用小示例
发布时间：2022-08-23 19:54:55
一、打开一个网页获取所有的内容
from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc
二、获取Http头
from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')
三、使用代理
1. 查看环境变量
print ""n".join(["％s=％s" ％ (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")
2. 设置环境变量
import os
os.putenv("http_proxy", "http://proxyaddr:<port>")
3. 使用代理
# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)
0
投稿猜你喜欢
连接服务器菜单栏找到【工具/Tools】->【Deployment/部署】->【Confinguration…/配置…】。点加号- 计数器(Counter)是一个非常常用的功能组件，这篇blog以未读消息数为例，介绍了在 Django中实现一个高性能计数器的基本要点。故事
- CSS的学习和其他的学习一样,都需要特定的方法才能比较快的去掌握它.要想掌握CSS, 首先要学会HTML，我刚开始是从零开始学习的
- 1.1.1 摘要 如果说要对数据库进行优化，我们主要可以通过以下五种方法，对数据库系统进行优化。 1. 计算机硬件调优 2. 应用程序调优
- 背景写代码的时候，你会发现你的代码越写越多。然而，功能需要也越来越多，然后你的冗余代码就多得不能再多了~~~怎么办，我太难了。那就寻求一些高
- 所谓线性最小二乘法，可以理解为是解方程的延续，区别在于，当未知量远小于方程数的时候，将得到一个无解的问题。最小二乘法的实质，是保证误差最小的
- PHP echo() 函数实例输出一些文本：<?php echo "Hello world!"; ?>定义和
- 本实验中分别针对空库、脱机、联机三种方式，配置一主两从的mysql标准异步复制。只做整服务器级别的复制，不考虑对个别库表或使用过滤复制的情况
- 前言飞桨(PaddlePaddle)是集深度学习核心框架、工具组件和服务平台为一体的技术先进、功能完备的开源深度学习平台1. 任务描述乘坐出
- OpenCV的作用及安装OpenCV简介OpenCV是一个开源的跨平台计算机视觉库，可以运行在Linux、Windows、Android和M
- 前言什么是OCR?光学字符识别（Optical Character Recognition, OCR），是指对文本资料的图像文件进行分析识别
- 目录1. 前言2. 介绍及安装3. 实战一下3-1 创建爬虫项目3-2 创建爬虫 Ai
- 1、目录操作1.1、获取当前目录# coding:utf-8import os# 获取当前工作目录(绝对路径)print(os.getcwd
- 动画精灵和碰撞检测一、动画精灵动画精灵：四处移动的单个图像或图像部分称为动画精灵（sprite），pygame有一个特殊的模块帮助跟踪屏幕上
- <!--#include file="admin_Checkuser.asp"--> <％
- 在计算机编程中，数据类型是非常重要的一个概念。数据类型决定了计算机内部如何表示数据，以及在执行不同的操作时需要进行哪些转换。Go 语言作为一
- 自从学习.NET以来，优雅的编程风格，极度简单的可扩展性，足够强大开发工具，极小的学习曲线，让我对这个平台产生了浓厚的兴趣，在工作和学习中也
- 本文我们为大家介绍 Python3 使用 PyMySQL 连接数据库，并实现简单的增删改查。什么是 PyMySQL？PyMySQL 是在 P
- 1、说明用于等待按钮。当用户按下按钮时，句子将被执行并获得返回值。2、语法retval=cv2.waitKey([delay])Retval
- 如何复制一个对象不考虑IDE提供的代码分析和go vet之类的静态分析工具，golang里几乎所有的类型都能被复制。// 基本标量类型和指针
