2018年12月17日
scipy
摘要： numpy pandas matoplotlib scipy stats scikit-learn 阅读全文
posted @ 2018-12-17 18:49 pupilheart 阅读(80) 评论(0) 推荐(0) 编辑
基于scrapy-redis分布式爬虫的部署
摘要： redis分布式部署 1.scrapy框架是否可以自己实现分布式？ - 不可以。原因有二。 其一：因为多台机器上部署的scrapy会各自拥有各自的调度器，这样就使得多台机器无法分配start_urls列表中的url。（多台机器无法共享同一个调度器） 其二：多台机器爬取到的数据无法通过同一个管道对数据 阅读全文
posted @ 2018-12-17 17:58 pupilheart 阅读(732) 评论(0) 推荐(0) 编辑
小强带你挣小钱v：zln88896

公告

点击 更新中