Python使用urllib模块的urlopen超时问题解决方法

yipeiwu_com6年前 (2020-03-06)Python基础

在新的公司开始上班，今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱，以便发送营销邮件。

于是用了一个python脚本来执行，前面抓了几个都没有什么问题，后来碰到一个论坛，在执行urlopen的地方总是提示超时，百度了一下，因为我使用的是urllib不是urllib2，所以无法直接在urlopen里面加timeout参数，只能是设置全局脚本的超时时间

首先：

复制代码代码如下:

import socket

然后：

复制代码代码如下:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

返回列表

协同过滤在用户 —— 物品（user - item）的数据关系下很容易收集到一些偏好信息（preference），比如评分。利用这些分散的偏好信息，基于其背后可能存在的关联性，来为用...

pytorch 预训练层的使用方法将其他地方训练好的网络，用到新的网络里面加载预训练网络 1.原先已经训练好一个网络 AutoEncoder_FC() 2.首先加载该网络，读取其存储...

第一种:利用functools 工具处理 import functools result = (lambda k: functools.reduce(int.__mul__, ran...

如下所示： source = ['C:\\Users\\admin\\Desktop\\pythonLearning'] target_dir = 'C:\\Users\\admin...

本文先了解一个简单阈值函数，以了解一个阈值算法的具体参数。然后比较不同阈值函数的区别。同样的，先用一副图说明本文重要大纲： #! usr/bin/env python...

宜配屋