本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
目的: 是学习python 多线程的工作原理，及通过抓取400张图片这种IO密集型应用来查看多线程效率对比 import requests import urlparse imp...
本文实例讲述了Python实现的爬取百度贴吧图片功能。分享给大家供大家参考，具体如下： #coding:utf-8 import requests import urllib2 im...
本文实例讲述了Python3使用正则表达式爬取内涵段子的方法。分享给大家供大家参考，具体如下： 似乎正则在爬虫中用的不是很广泛，但是也是基本功需要我们去掌握。 先将内涵段子网页爬取下来，...
本文实例讲述了Python爬虫实现“盗取”微信好友信息的方法。分享给大家供大家参考，具体如下： 刚起床，闲来无聊，找点事做，看了朋友圈一篇爬取微信好友信息的文章，突发奇想，偷偷看看女朋友...
众所周知，python是写爬虫的利器，今天作者用python写一个小爬虫爬下一个段子网站的众多段子。 目标段子网站为“http://ishuo.cn/”，我们先分析其下段子的所在子页的u...