本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
用正则表达式爬取猫眼电影top100，具体内容如下 #!/usr/bin/python # -*- coding: utf-8 -*- import json # 快速导...
本文实例讲述了Python爬虫框架scrapy实现的文件下载功能。分享给大家供大家参考，具体如下： 我们在写普通脚本的时候，从一个网站拿到一个文件的下载url，然后下载，直接将数据写入文...
前言 本来打算写的标题是XPath语法，但是想了一下Python中的解析库lxml，使用的是Xpath语法，同样也是效率比较高的解析方法，所以就写成了XPath语法和lxml库的用法 X...
1、抓取煎蛋网上的图片。 2、代码如下： import urllib.request import os #to open the url def url_open(url): r...
前言 此次的目标是爬取指定城市的天气预报信息，然后再用Python发送邮件到指定的邮箱。 下面话不多说了，来一起看看详细的实现过程吧 一、爬取天气预报 1、首先是爬取天气预报的信息，用的...