本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
前言 上次使用了BeautifulSoup库爬取电影排行榜，爬取相对来说有点麻烦，爬取的速度也较慢。本次使用的lxml库，我个人是最喜欢的，爬取的语法很简单，爬取速度也快。 本次爬取的豆...
调用百度API获取经纬度信息。 import requests import json address = input('请输入地点：') par = {'address': add...
本文思路主要来源于实验楼的教程，但是一些具体的一些细节是我自己发现的，比如哪里获得站点对应的3位英文编号，怎么获得这个查询的url 本文用到的库主要有requests(获取url的内容)...
获取首页元素信息： 目标 test_URL：http://www.xxx.com.cn/ 首先检查元素，a 标签下是我们需要爬取得链接，通过获取链接路径，定位出我们需要的信息 sou...
本文实例为大家分享了python抓取文件夹的所有文件的具体代码，供大家参考，具体内容如下 #!/user/bin/python # -*- coding:utf8 -*- i...