c rapyd是 scrapy 的部署, 是官方提供的一个爬虫管理工具, 通过他可以非常方便的上传控制爬虫的运行, 安装 : pip install scapyd 他提供了一个json ,web, server 在命令行中输入scrapyd 回车, 给个本地请求: curl http://localhost:6800 如果 是无界面的 linux ,可以通过端口转发 python安装库的路径 vim进到该文件中 默认为127.0.0.1 这样就可以访问了, 还要安装个客户端, pin inst…