Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

本文实例讲述了Python字典数据对象拆分的简单实现方法。分享给大家供大家参考，具体如下：有朋友问了下问题: {'A1;A2': 'B','A3': 'C'}这种数据结构要拆解成{'A...

起步 Pandas最初被作为金融数据分析工具而开发出来，因此 pandas 为时间序列分析提供了很好的支持。 Pandas 的名称来自于面板数据（panel data）和python数...

本文实例总结了Python正则表达式基本用法。分享给大家供大家参考，具体如下：正则表达式在平时做文本处理（爬虫程序去解析html中的字段，在分析log文件的时候需要抓取一些关键数据）的...

本文实例介绍了Python通过正则表达式获取,去除(过滤)或者替换HTML标签的几种方法，具体内容如下 python正则表达式关键内容: python正则表达式转义符: . 匹配除...

1.首先自己直接在cmd中输入 pip3 install openCV是不可行的，即需要自己下载安装包本地安装 2.openCV库下载地址http://www.lfd.uci.edu/...

宜配屋