Python urlopen 使用小示例

yipeiwu_com6年前 (2020-03-06)Python基础

一、打开一个网页获取所有的内容

from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc

二、获取Http头

from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')

三、使用代理

1. 查看环境变量

print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")

2. 设置环境变量

import os
os.putenv("http_proxy", "http://proxyaddr:<port>")

3. 使用代理

# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)

返回列表

上一篇：Python字符转换

下一篇：PHP生成静态页面详解

相关文章

Python基础之函数用法实例详解

本文以实例形式较为详细的讲述了Python函数的用法，对于初学Python的朋友有不错的借鉴价值。分享给大家供大家参考之用。具体分析如下：通常来说，Python的函数是由一个新的语句编...

python实现整数的二进制循环移位

python实现整数的二进制循环移位

题目：如何在python中实现整数的二进制循环移位？概述在python中，可以通过<<以及>>运算符实现二进制的左移位以及右移位，然而并没有实现循环移位的运算...

python中利用await关键字如何等待Future对象完成详解

前言本文主要给大家介绍了关于python用await关键字等待Future对象完成的相关内容，分享出来供大家参考学习，下面话不多说了，来一起看看详细的介绍吧。在下面的例子里，演示了怎...

Python socket C/S结构的聊天室应用实现

Python socket C/S结构的聊天室应用服务端： #!/usr/bin/env python #coding:utf8 import socket,select def...

使用 Python 玩转 GitHub 的贡献板(推荐)

使用 Python 玩转 GitHub 的贡献板(推荐)

细心的人都会发现GitHub个人主页有一个记录每天贡献次数的面板，我暂且称之为贡献面板。就像下图那个样子。只要当天在GitHub有提交记录，对应的小格子就会变成绿色，当天提交次数越多，颜...