本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
1、主函数（WeiboMain.py）： 复制代码 代码如下:import urllib2import cookielib import WeiboEncodeimport WeiboS...
写了一个抓taobao图片的爬虫，全是用if，for，while写的，比较简陋，入门作品。 从网页http://mm.taobao.com/json/request_top_list.h...
scrapy.FormRequest login.py class LoginSpider(scrapy.Spider): name = 'login_spider' start...
1、引言 在Python网络爬虫内容提取器一文我们详细讲解了核心部件：可插拔的内容提取器类gsExtractor。本文记录了确定gsExtractor的技术路线过程中所做的编程实验。这是...
urllib urllib模块是python3的URL处理包 其中： 1、urllib.request主要是打开和阅读urls 个人平时主要用的1： 打开对应的URL：urllib.re...