python爬虫

手里的几百个网站总是出现打不开、被入侵、百度危险提醒，每次都要花大量的时间去查看，去维护，后面觉得这个方式太low，就有了下面的小爬虫。 图片来源互联网，侵删 爬虫检测范围 1、检测百度入侵 2、检测...

根据公司需求开发了一套分布式爬虫系统，但因为人懒的问题一直放在Win服务器下跑，毕竟就再终端执行下那个文件，然后就不管，随着运维的成本逐渐增长，所以将原有的Win服务器全部更新为Linux，使用军哥的...