Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

从这次开始，我会由简单到困难（其实也不会困难到哪里去）讲几个例程，每一个例程都是我自己写（或者修改，那样的话我会提供原始出处）的，都具有一定的操作性和娱乐性。例程中汇尽量覆盖到以前所讲的...

第一个twisted支持的诗歌服务器尽管Twisted大多数情况下用来写服务器代码，但为了一开始尽量从简单处着手，我们首先从简单的客户端讲起。让我们来试试使用Twisted的客户端。...

使用Python内置函数：bin()、oct()、int()、hex()可实现进制转换。先看Python官方文档中对这几个内置函数的描述： bin(x) Convert an inte...

while循环只要循环条件为True（以下例子为x > y），while循环就会一直执行下去： u, v, x, y = 0, 0, 100, 30 ⇽...

re模块下的函数 compile(pattern)：创建模式对象 import re pat=re.compile('A') m=pat.search('CBA')...

宜配屋