一个基于搜索引擎的子域名挖掘
https://github.com/admintony/Digger
tony对百度做的搜索以及可以了。而我需要做的是达到多种搜索引擎共同采用和搜集，并采用Gevent进行异步操作
Baidu Bing 360搜索 soso sogou
notice:后三种由于禁止了过度请求，还没做代理等机制的我为了将速度提上去暂时不适用.后期若不影响速度会破解反爬而加上其他搜索引擎(手段会影响速度)
最后的速度大约达到每个域名的挖掘20秒内完成
增加更多正则表达式去匹配尽量多和完整的子域名再进行去重和过滤，正则表达式速度极快不影响观测速率。
同目录建立domains.txt文件夹,程序将依次读取并进行挖掘，速度已采用消耗资源较少的协程优化
适合需要快速搜集不是完全完整的子域名，而搜索引擎收录较好的域名。最重要的是快速，相较于Layer法师的半小时一个域名还带一段时间死机，此工具达到20s一个域名