本文实例讲述了python抓取百度首页的方法。分享给大家供大家参考。具体实现方法如下：
import urllib
def downURL(url,filename):
try:
fp=urllib.urlopen(url)
except:
print('download error')
return 0
op=open(filename,'wb')
while 1:
s=fp.read()
if not s:
break
op.write(s)
fp.close()
op.close()
return 1
downURL("http://www.baidu.com","C:\\url.txt")
希望本文所述对大家的Python程序设计有所帮助。
实例如下所示： import urllib.request import os, re,sys,time try: from StringIO import StringIO ex...
应用场景： 状态不是200的URL重试多次 代码比较简单还有部分注释 python2.7实现： # -*-coding:utf-8-*- """ ayou """ import...
一、乱码问题描述 经常在爬虫或者一些操作的时候，经常会出现中文乱码等问题，如下 原因是源网页编码和爬取下来后的编码格式不一致 二、利用encode与decode解决乱码问题...
本文实例讲述了python实现爬虫抓取小说功能。分享给大家供大家参考，具体如下： # -*- coding: utf-8 -*- from bs4 import BeautifulS...
本文研究的主要是Python爬虫天气预报的相关内容，具体介绍如下。 这次要爬的站点是这个：http://www.weather.com.cn/forecast/ 要求是把你所在城市过去...