Auto Hooks Spider

栏目: 编程工具 · 发布时间: 8年前

内容简介:Auto Hooks Spider

好像好久没发东西了,抽空研究自动化,一部分是如何有效获取自动化的food,想了很多也实现出了很多,比如一些常规手法、PassiveDNS等等,尤其后者虽然有效果但发现有个弊端,就是说从这种底层记录进行筛选贼TMD烧硬件。不然我就想去拆小区交换机了= =。倒不如实现个自动spider,省了来回点啊点。

实现很简单,因为我本地实现的比较复杂,所以是把它拆分下改成现成的发出来。还有就是代理的实现我没放进去,想爬墙外的话可以改下requests模块,拆分url判断是否存在于gfw列表就行了。

Auto Hooks Spider

个人收集的有价值主域名1000+,hooks.txt先放200个你们玩。

Auto Hooks Spider

https://github.com/Tr3jer/AutoHookSpider

AutoHookSpider
├── LICENSE
├── README.md
├── hooks.txt   #hooks字典,随机放了200个,可以自己收集。
├── lib
│   ├── __init__.py
│   ├── common.py   #琐碎功能
│   └── record.sql  #先在 Mysql 创建这个表
├── main.py #主程序
└── requirements.txt

sudo pip install -r requirements.txt
lib/record.sql into mysql
usage: python main.py {Options}[ google.com,twitter.com,facebook.com | -t 20 ]
或者直接python main.py会直接在hooks.txt抽取(thread_cnt)个入口域名。

以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

机器与人:埃森哲论新人工智能

机器与人:埃森哲论新人工智能

【美】保罗•多尔蒂 詹姆斯•威尔逊 / 赵亚男 / 中信出版社 / 2018-10-1 / 49.00元

自人工智能问世以来,人们普遍持有人机对立的观点,且无时无刻不在害怕自己的工作会被人工智能取代。作者认为,是时候抛开这些无谓的担忧了,因为人类社会正走向一个与机器共融共生的时代。 未来的新型工作模式是什么?未来有哪些工作不会被人工智能取代?人工智能时代重要的生存技能是什么?本书围绕这三大核心问题做了透彻的分析。作者带我们见识了置于业务流程背景之下的人工智能,阐述了其在不同职能部门中起到的推动作......一起来看看 《机器与人:埃森哲论新人工智能》 这本书的介绍吧!

HTML 编码/解码
HTML 编码/解码

HTML 编码/解码

SHA 加密
SHA 加密

SHA 加密工具

html转js在线工具
html转js在线工具

html转js在线工具