内容简介：Auto Hooks Spider
好像好久没发东西了，抽空研究自动化，一部分是如何有效获取自动化的food，想了很多也实现出了很多，比如一些常规手法、PassiveDNS等等，尤其后者虽然有效果但发现有个弊端，就是说从这种底层记录进行筛选贼TMD烧硬件。不然我就想去拆小区交换机了= =。倒不如实现个自动spider，省了来回点啊点。
实现很简单，因为我本地实现的比较复杂，所以是把它拆分下改成现成的发出来。还有就是代理的实现我没放进去，想爬墙外的话可以改下requests模块，拆分url判断是否存在于gfw列表就行了。
个人收集的有价值主域名1000+，hooks.txt先放200个你们玩。
https://github.com/Tr3jer/AutoHookSpider
AutoHookSpider ├── LICENSE ├── README.md ├── hooks.txt #hooks字典，随机放了200个，可以自己收集。 ├── lib │ ├── __init__.py │ ├── common.py #琐碎功能 │ └── record.sql #先在 Mysql 创建这个表 ├── main.py #主程序 └── requirements.txt sudo pip install -r requirements.txt lib/record.sql into mysql usage: python main.py {Options}[ google.com,twitter.com,facebook.com | -t 20 ] 或者直接python main.py会直接在hooks.txt抽取(thread_cnt)个入口域名。
以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持 码农网
猜你喜欢:
本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。
浪潮之巅（上册）
吴军 / 人民邮电出版社 / 2013-5-1 / 35.00元
《浪潮之巅(第2版)(上册)》不是一本科技产业发展历史集，而是在这个数字时代，一本IT人非读不可，而非IT人也应该阅读的作品。一个企业的发展与崛起，绝非只是空有领导强人即可达成。任何的决策、同期的商业环境，都在都影响着企业的兴衰。《浪潮之巅》不只是一本历史书，除了讲述科技顶尖企业的发展规律，对于华尔街如何左右科技公司，以及金融风暴对科技产业的冲击，也多有着墨。此外，《浪潮之巅》也着力讲述很多尚在普......一起来看看 《浪潮之巅（上册）》 这本书的介绍吧!
