简单易用fofa爬虫
抓到的结果会以csv形式存储
A:\recent\fofa-j>python fofa-j.py
_____ _____ __
_/ ____\_____/ ____\____ |__|
\ __\/ _ \ __\__ \ ______ | |
| | ( <_> ) | / __ \_ /_____/ | |
|__| \____/|__| (____ / /\__| |
\/ \______|
by jayus
Usage:请输入参数
例如:python fofa-j.py 'app="Solr"' Solr 94bbbb177c4a564feddb8c7d413d5d61 y
例如:python fofa-j.py 'app="Solr"'(Fofa搜索语法) Solr(搜索结果文件名) 94bbbb177c4a564feddb8c7d413d5d61(Fofa的Cookie的_fofapro_ars_session值) y(保存页面内容)
A:\recent\fofa-j>python fofa-j.py "\"******\"" result b3ebd5fa7ab534f30e6a94561b36f3c3 y
_____ _____ __
_/ ____\_____/ ____\____ |__|
\ __\/ _ \ __\__ \ ______ | |
| | ( <_> ) | / __ \_ /_____/ | |
|__| \____/|__| (____ / /\__| |
\/ \______|
by jayus
"******"
[+] 共找到46367个结果
[+] 需要抓取的数量：
10000
[+] 抓取第 1 页...
[+] 抓取页面完毕，页面长度为9113808
[+] 数据清洗完毕，抓取数量为2000
2000
[+] 抓取第 2 页...
[+] 抓取页面完毕，页面长度为8709119
[+] 数据清洗完毕，抓取数量为2000
4000
[+] 抓取第 3 页...
[+] 抓取页面完毕，页面长度为8216369
[+] 数据清洗完毕，抓取数量为2000
6000
[+] 抓取第 4 页...
[+] 抓取页面完毕，页面长度为9093013
[+] 数据清洗完毕，抓取数量为2000
8000
[+] 抓取第 5 页...
[+] 抓取页面完毕，页面长度为9493831
[+] 数据清洗完毕，抓取数量为2000
10000
[+] 抓取第 6 页...
[+] 抓取页面完毕，页面长度为7840
[+] 数据清洗完毕，抓取数量为0
10000
[+] 共抓取到 10000 个结果