Window环境下Scrapy开发环境搭建

yipeiwu_com6年前Python基础

快速搭建scrapy开发环境

注:不同的电脑上所带有环境不同,安装方式有些许差别

1、成功安装python并添加环境变量
2、安装pip
3、安装scrapy

解压成功后进入pip目录下命令安装pip

python setup.py install

安装成功后查看pip版本信息
这里写图片描述
pip安装成功后安装scrapy

pip install scrapy

pip管理非常类似Linux

如果不出意外的话会安装成功,有时候会提示安装失败的情况如下图所示:
这里写图片描述 

提示缺失模块管理
下面是所有的twisted的版本

这里写图片描述 

这里采用的是在线安装的方式

pip install twisted==17.5

后面的是版本号这里我们安装17.5版本
这里写图片描述 

安装成功
接下来继续安装scrapy 安装成功并创建一个scrapy项目

pip install scrapy

这里写图片描述

相关文章

Python 等分切分数据及规则命名的实例代码

Python 等分切分数据及规则命名的实例代码

 将一份一亿多条数据的csv文件等分为10份,代码如下所示: import pandas as pd data = pd.read_csv('C:\\Users\\Pych...

TensorFlow搭建神经网络最佳实践

一、TensorFLow完整样例 在MNIST数据集上,搭建一个简单神经网络结构,一个包含ReLU单元的非线性化处理的两层神经网络。在训练神经网络的时候,使用带指数衰减的学习率设置、使用...

Python 使用指定的网卡发送HTTP请求的实例

需求: 一台机器上有多个网卡, 如何访问指定的 URL 时使用指定的网卡发送数据呢? $ curl --interface eth0 www.baidu.com # curl...

浅谈python 导入模块和解决文件句柄找不到问题

如果你退出 Python 解释器并重新进入,你做的任何定义(变量和方法)都会丢失。因此,如果你想要编写一些更大的程序,为准备解释器输入使用一个文本编辑器会更好,并以那个文件替代作为输入执...

对python周期性定时器的示例详解

一、用thread实现定时器 py_timer.py文件 #!/usr/bin/python #coding:utf-8 import threading import os im...