在Windows平台下，如果想运行爬虫的话，就需要在cmd中输入：
scrapy crawl spider_name
这时，爬虫就能启动，并在控制台（cmd）中打印一些信息，如下图所示：
但是，cmd中默认只能显示几屏的信息，其他的信息就无法看到。
如果我们想查看爬虫在运行过程中的调试信息或错误信息的话，会很不方便。
此时，我们就可以将控制台的信息写入的一个文本文件中去，方便我们查看。
命令如下:
D:\>scrapy crawl spder_name -s LOG_FILE=scrapy.log
总结
以上就是本文关于Python使用Scrapy保存控制台信息到文本解析的全部内容，希望对大家有所帮助。感兴趣的朋友可以继续参阅本站其他相关专题，如有不足之处，欢迎留言指出。感谢朋友们对本站的支持！
最近重新拾起Django,但是Django并不支持mongodb,但是有一个模块mongoengine可以实现Django Model类似的封装.但是mongoengine的中文文档几乎...
本文实例分析了python集合类型用法。分享给大家供大家参考。具体分析如下： python的集合类型和其他语言类似, 是一个无序不重复元素集,我在之前学过的其他的语言好像没有见过这个类型...
枚举是常用的功能,看看Python的枚举. from enum import Enum Month = Enum('Month', ('Jan', 'Feb', 'Mar', 'A...
这篇文章主要介绍了Python实现序列化及csv文件读取,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 一、python 序列化： 序...
复制代码 代码如下:If order does not matter, you can use "".join(set(foo))set() will create a set of u...