Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

背景最近处理文本文档时（文件约2GB大小），出现memoryError错误和文件读取太慢的问题，后来找到了两种比较快Large File Reading 的方法，本文将介绍这两种读取方...

urllib2.urlopen()函数不支持验证、cookie或者其它HTTP高级功能。要支持这些功能，必须使用build_opener()函数创建自定义Opener对象。复制代码代...

仔细观察下面两个python程序，代码一模一样，但是运行的结果却不同，就是因为最后一行return缩进的不同复制代码代码如下:def powersum(power, *args): '...

这篇文章主要介绍了Python hashlib加密模块常用方法解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下主要用于对字符串的加...

如下所示： from tkinter import * import time #更新进度条函数 def change_schedule(now_schedule,all_sch...

宜配屋