Scrapy学习笔记

需要安装一个pillow的依赖 pip install pillow pipeline 编写完之后需要在setting文件中注册管道，然后添加下面的配置 如果文件下载链接会先返回302重定向再下载的话

在python中执行命令行指令 创建项目 python -m scrapy startproject tutorial 创建爬虫 python -m scrapy genspider quotes_s

解析一下setting.py的常用配置项 是否遵守爬虫约定 最大同时请求请求间隔，日志级别，等等等等

开始创建第一个项目，项目的来源参考了官方文档，并进行了适当的翻译，是一个爬取名言的项目，怀疑这个网站是不是就是为了这个项目而存在的，为了避免麻烦，我也用这个网站，而不是国内的类似网站

Scrapy的安装与验证，跳过了python环境的安装，并忽略了 Anaconda的使用，直接使用系统安装方式