02-scrapy的cmdline命令

605 阅读1分钟

1.启动爬虫的命令为: scrapy crawl spidername(爬虫名)

2.我们还可以通过下述方式来启动爬虫

  步骤一:创建一个.py文件。startspider.py(这里文件的名称可以自己给定)

复制代码 #!/usr/bin/env python

-- coding:utf-8 --

from scrapy import cmdline

方式一:注意execute的参数类型为一个列表

cmdline.execute('scrapy crawl spidername'.split())

方式二:注意execute的参数类型为一个列表

cmdline.execute(['scrapy', 'crawl', 'spidername']) 复制代码   步骤二:通过python startspider.py来运行此文件即可