scrapydweb

开源企业级舆情新闻爬虫项目：支持任意数量爬虫一键运行、爬虫定时任务、爬虫批量删除；爬虫一键部署；爬虫监控可视化；配置集群爬虫分配策略；现成的 Docker 一键部署文档已为大家踩坑。一个企业级的舆情新闻爬虫项目：支持任意数量爬虫一键运行、爬虫定时任务、爬虫批量删除、爬虫一键部署。