本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
大家好，前面入门已经说了那么多基础知识了，下面我们做几个实战项目来挑战一下吧。那么这次为大家带来，Python爬取糗事百科的小段子的例子。 首先，糗事百科大家都听说过吧？糗友们发的搞笑的...
如果URL中存在中文，而你却不对它做任何处理，他不会达到你所想的那样，因此我们需要将中文部分进行处理，要用到urllib.parse模块中的quote将中文转化成URL所需的编码，url...
最近刚学习Python，做了个简单的爬虫，作为一个简单的demo希望帮助和我一样的初学者。 代码使用python2.7做的爬虫 抓取51job上面的职位名，公司名，薪资，发布...
本文实例讲述了Python抓取淘宝下拉框关键词的方法。分享给大家供大家参考。具体如下： import urllib2,re for key in open('key.txt'):...
首先，需要获取任意知乎的问题，只需要你输入问题的ID，就可以获取相关的页面信息，比如最重要的合计有多少人回答问题。 问题ID为如下标红数字 编写代码，下面的代码用来检测用户输入的是否是...