这里花了一点时间去写了一个Google的url采集工具,目前仅有谷歌,后面会增添更多的渠道,支持代理设置,可以增加代理池,可以用于快速挖洞
项目地址:
https://github.com/baianquanzu/Google_searchurl
用于爬取谷歌关键词搜索的url,便于红队,src等快速提取
使用方式:
源码直接运行需要解决:
go的环境,当出现下面的报错
go: go.mod file not found in current directory or any parent directory; see 'go help modules'
运行:
go env -w GO111MODULE=on
go mod init xxx //xxx代表文件名
可以直接编译:go build -o crawl_urls.exe url.go
直接使用exe文件:
直接找到文件存储目录运行cmd输入:Google_searchurl.exe
这里可以设置你的爬取数量和代理,这里代理默认是http的,也可以设置socks5
原文始发于微信公众号(白安全组):Google的url采集工具
免责声明:文章中涉及的程序(方法)可能带有攻击性,仅供安全研究与教学之用,读者将其信息做其他用途,由读者承担全部法律及连带责任,本站不承担任何法律及连带责任;如有问题可邮件联系(建议使用企业邮箱或有效邮箱,避免邮件被拦截,联系方式见首页),望知悉。
- 左青龙
- 微信扫一扫
-
- 右白虎
- 微信扫一扫
-
评论