部署

• 把 scrapy 项目部署到服务器上

scrapyd

• scrapyd 是一个 scrapy 项目的部署工具
• 可以把 scrapy 项目部署到服务器上,定时运行
• 可以通过 api 接口触发项目运行
• 可以查看项目运行日志
• 可以查看项目运行状态
• 可以停止项目运行
• 可以删除项目
• 可以暂停项目运行
• 可以恢复项目运行

服务器端

• 运行服务器上安装 scrapyd

pip install scrapyd

• 启动 scrapyd 服务

sudo scrapyd

客户端

• 开发者安装 scrapyd-client

pip install scrapyd-client