Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

在学习推荐系统、机器学习、数据挖掘时，python是非常强大的工具，也有很多很强大的模块，但是模块的安装却是一件令人头疼的事情。现在有个工具——anaconda，他已经帮我们集成好了很...

因工作需要用python通过hbase的thrift服务读取Hbase表数据，发现公司的测试环境还不支持，于是自己动手准备环境，在此我将在安装步骤尽可能描述清楚，旨在给第一次动手安装的朋...

reverse()方法代替逆转列表对象。语法以下是reverse()方法的语法： list.reverse() 参数 ...

本文实例讲述了Python实现按照指定要求逆序输出一个数字的方法。分享给大家供大家参考，具体如下：问题是：输入一个数字，按照指定要求逆序输出该数字，很简单，下面是实现： #!usr...

本文实例讲述了Python多线程处理操作。分享给大家供大家参考，具体如下： python — 多线程处理 1、一个进程执行完后，继续下一个进程 root@72132server:~#...

宜配屋