Window环境下Scrapy开发环境搭建

yipeiwu_com7年前Python基础

快速搭建scrapy开发环境

注:不同的电脑上所带有环境不同,安装方式有些许差别

1、成功安装python并添加环境变量
2、安装pip
3、安装scrapy

解压成功后进入pip目录下命令安装pip

python setup.py install

安装成功后查看pip版本信息
这里写图片描述
pip安装成功后安装scrapy

pip install scrapy

pip管理非常类似Linux

如果不出意外的话会安装成功,有时候会提示安装失败的情况如下图所示:
这里写图片描述 

提示缺失模块管理
下面是所有的twisted的版本

这里写图片描述 

这里采用的是在线安装的方式

pip install twisted==17.5

后面的是版本号这里我们安装17.5版本
这里写图片描述 

安装成功
接下来继续安装scrapy 安装成功并创建一个scrapy项目

pip install scrapy

这里写图片描述

相关文章

用Python实现一个简单的能够发送带附件的邮件程序的教程

基本思路就是,使用MIMEMultipart来标示这个邮件是多个部分组成的,然后attach各个部分。如果是附件,则add_header加入附件的声明。 在python中,MIME的这些...

python kmeans聚类简单介绍和实现代码

一、k均值聚类的简单介绍 假设样本分为c类,每个类均存在一个中心点,通过随机生成c个中心点进行迭代,计算每个样本点到类中心的距离(可以自定义、常用的是欧式距离)  ...

Python程序暂停的正常处理方法

将进程挂起(Suspend) 而非 阻塞(Block) 如果用sleep() 进程将阻塞 假设进程下有两个线程 那么这两个线程会继续运行 要使进程挂起 可以考虑使用psutil im...

详解Python各大聊天系统的屏蔽脏话功能原理

详解Python各大聊天系统的屏蔽脏话功能原理

突然想到一个视频里面弹幕被和谐的一满屏的*号觉得很有趣,然后就想用python来试试写写看,结果还真玩出了点效果,思路是首先你得有一个脏话存放的仓库好到时候检测,那么个人还是喜欢用列表,...

python 切换root 执行命令的方法

如下,以创建系统用户举例, 配置文件配置普通用户信息,登入后切换root用户,创建一个指定名字和密码的系统用户: def create_user(root_pwd,username,...