本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
方法： 使用urlencode函数 urllib.request.urlopen() import urllib.request import urllib.parse url =...
本文实例为大家分享了Python爬取网络图片的具体代码，供大家参考，具体内容如下 代码： import urllib import urllib.request import re...
本文实例为大家分享了python抓取文件夹的所有文件的具体代码，供大家参考，具体内容如下 #!/user/bin/python # -*- coding:utf8 -*- i...
本文代码是使用python抓取京东小米8手机的配置信息 首先找到小米8商品的链接：https://item.jd.com/7437788.html 然后找到其配置信息的标签，我们找到其配...
目标网站： 首先获取第一页的数据，这里关键要切换到iframe里 打印一下 获取剩下的页数，这里在点击下一页之前需要设置一个延迟，不然会报错。 结果： 一共37页，爬取完...