本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
前言 上次使用了BeautifulSoup库爬取电影排行榜，爬取相对来说有点麻烦，爬取的速度也较慢。本次使用的lxml库，我个人是最喜欢的，爬取的语法很简单，爬取速度也快。 本次爬取的豆...
Selenium简介 Selenium是一个用于测试网站的自动化测试工具，支持各种浏览器包括Chrome、Firefox、Safari等主流界面浏览器，同时也支持phantomJS无界...
项目内容： 用Python写的糗事百科的网络爬虫。 使用方法： 新建一个Bug.py文件，然后将代码复制到里面后，双击运行。 程序功能： 在命令提示行中浏览糗事百科。 原理解...
Urllib3是一个功能强大，条理清晰，用于HTTP客户端的Python库。许多Python的原生系统已经开始使用urllib3。Urllib3提供了很多python标准库urllib里...
本文主要介绍了数据处理方面的内容，希望大家仔细阅读。 一、数据分析 得到了以下列字符串开头的文本数据，我们需要进行处理 二、回滚 我们需要对httperror的数据进行再处理 因为代...