Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

遍历指定文件夹下的文件，根据文件后缀名，获取指定类型的文件列表；根据文件列表里的文件路径，逐个获取文件属性里的“修改时间”，如果“修改时间”与“系统当前时间”差值大于某个值，则删除该文件...

在web开发的时候我们经常会遇到网页抓取和分析，各种语言都可以完成这个功能。我喜欢用python实现，因为python提供了很多成熟的模块，可以很方便的实现网页抓取。但是在抓取过程中会...

本文实例讲述了Python设计模式之代理模式。分享给大家供大家参考，具体如下：代理模式(Proxy Pattern):为其他对象提供一种代理以控制对这个对象的访问 #!/usr/b...

一、文件形式的邮件复制代码代码如下:#!/usr/bin/env python3#coding: utf-8import smtplibfrom email.mime.text imp...

本文为大家分享了python使用tcp实现局域网内文件传输的具体代码，供大家参考，具体内容如下功能：可以利用python创建的TCP客户端从我们自己搭建的TCP服务器上下载文件。...

宜配屋