本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
既然本篇文章说到的是Python构建网页爬虫原理分析，那么小编先给大家看一下Python中关于爬虫的精选文章： python实现简单爬虫功能的示例 python爬虫实战之最简单的网页爬虫...
正则表达式的使用 想要学习 Python 爬虫 ， 首先需要了解一下正则表达式的使用，下面我们就来看看如何使用。 . 的使用这个时候的点就相当于一个占位符，可以匹配任意一个字符，什么意思...
本文介绍了python爬虫之BeautifulSoup 使用select方法详解 ，分享给大家。具体如下： <html><head><title>...
以豆瓣为例，访问https://www.douban.com/contacts/list 来查看自己关注的人，要登录才能查看。 如果用requests.get()方法获取这个http，没...
本文实例讲述了python实现爬取千万淘宝商品的方法。分享给大家供大家参考。具体实现方法如下： import time import leveldb from urllib.pars...