本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
问题提出： 有时候我们采集网页，处理完毕后将字符串保存到文件或者写入数据库，这时候需要制定字符串的编码，如果采集网页的编码是gb2312，而我们的数...
现在网上有很多python2写的爬虫抓取网页图片的实例，但不适用新手（新手都使用python3环境，不兼容python2）， 所以我用Python3的语法写了一个简单抓取网页图片的实例...
最基本的抓取网页内容的代码实现： #!/usr/bin/env python from urllib import urlretrieve def firstNonBl...
本文实例讲述了Python大数据之网络爬虫的post请求、get请求区别。分享给大家供大家参考，具体如下： 在JetBrains PyCharm 2016.3软件中编写代码前，需要指定p...
1.善于利用soup节点的parent属性 比如对于已经得到了如下html代码： <td style="padding-left:0" width="60%"><l...