爬虫整体结构

来源:互联网 发布:网络推广面试题及答案 编辑:程序博客网 时间:2024/05/21 09:38

1、开发语言是python

2、使用开源爬虫框架scrapy

3、使用scrapy对应的服务器scrapyd

4、使用crontab定时机制

原创粉丝点击