网站辅助的小工具，它能针对网站进行快速批量的爬取，小米范网站批量爬虫工具能将爬取的URL进一步调用wvs、sqlmap、brutexss等工具进行检测，挺实用，也蛮简单，有需要的可以试试！
小米范网站批量爬虫工具怎么用
使用方法
随便点击下面的任一个文件
出现如下界面时，点任意键运行。
打开软件界面后，点击新建任务，输入要检测的URL。
设置子域名白名单，属于白名单域名的URL则自动保留并进行抓取。
设置并发站点、并发线程等参数，点击开始即可。
小米范网站批量爬虫工具工作流程
假设我们新建任务，放入100个URL作为爬虫的起始URL，那么具体的爬取过程如下：
1、针对这100个URL，按照是否同源进行合并，同源的URL则放入一个目标，并将这些URL作为这个源的起始URL。
2、针对每个目标进行爬取（默认并发5个目标），针对每个目标的起始URL采用浏览器点击抓包（默认每个目标最多开5个浏览器）+HTML解析的方式获取URL，浏览器点击在后台运行，没有界面，这里的浏览器点只是在点击后将发出去的请求URL记录，但并不真正发出去请求。
3、将前两步收集到的URL作为种子，进行传统的爬取，这里的爬取主要采用了webmagic框架，并对框架本身做了一点修改。另外每一个页面下载之前会进行爬取URL黑名单匹配，匹配到黑名单则跳过，下载到的每个页面提取出来的URL会进行子域名白名单匹配，匹配到白名单则会放入爬取队列。
针对爬到的URL可直接右键使用sqlmap、brutexss、panoptic、wvs进行安全检测，目前还在考虑再加入一些其他的检测工具。
此外也提供了目录扫描功能，在左侧树形结构的任意节点右键目录扫描会对当前选中节点所在的路径进行目录扫描。
- PC官方版
- 安卓官方手机版
- IOS官方手机版
鲜牛网游加速器4.6.6.2 电脑版
cFosSpeed破解版12.50.2525 中文免费版
奇游电竞加速器6.4.3 官方最新版
网易UU网游加速器(可免费加速steam)4.45.0 官方最新版
besttrace电脑版3.9.1.0 官方版
谷歌访问助手(Google Helper插件)2.6.2 官方版
speedtest网络测速软件1.8.156.1 单文件版
systemview通信系统仿真软件5.0 免费版
Windows U-Finder2.1.4 厂商免费版
水星MWU300T WPS安装程序1.0 官方安装版
绿联HDMI矩阵 RS232上位机软件1.10.01 绿色官方版
绿联云智能云存储pc版2.4.0.1915 一键安装版
cFosSpeed网络流量优化软件12.00.2512 免序列号去试用限制版
IP监测微信提醒工具(IPMonitor)2.0 免费版
新华三模拟器HCL2.1.2 最新版
佛山职业技术学院校园网登录软件0.2 破解版
局域网ip自动分配工具(运维/技术人员IP配置工具)1.1 单文件免费版
联想网课助手2.1.2 中文免费版
Exchang恢复软件（Shoviv Exchange Recovery Manager）19.11 英文特别版
Win10热点开机自启工具1.0 中文免费版
HS8145C5获取超级密码工具集合3 in 1 中文免费版
腾讯微云pc版5.2.1282 官方最新版
爱站工具包(爱站seo工具包)1.11.25.0 最新破解版
电信宽带上网助手9.5.2101.1318 官方版
猎豹免费wifi电脑版5.1 校园版
联想滑块验证助手1.1 单文件免费版
指定硬件厂商MAC地址生成工具1.0 中文免费版
ER系列路由器ISP数据库文件1.6版本
TP-LINK Web网管交换机客户端应用程序1.0.3 官网免费版
华为配置加解密工具1.0 简体中文版
全新 NETGEAR 网件精灵2.4.62 官方中文版
360随身wifi软件pc端
快牙电脑版2.8.0.0 官方最新版
爱微帮媒体版客户端2.16 官方最新版
蒲公英WiFi电脑端2.0.3官方版
WiFi共享大师3.0.0.6 官方最新版
360三代抢票神器(360抢票王软件)8.1.1.156官方正式版【2017】
青青草原WiFi电脑版5.2 免费版
TFTP全自动智能路由刷固件软件1.688 官网最
IP管理专家(局域网管理工具)V4.0 简体中文版
内网地址检测工具(局域网地址检测器)1.6 中
淘宝图片抓取工具1.1 绿色免费版 【2015】
种子搜索神器(p2psearcher)7.0.8 绿色免安
HCE300系列磁卡写卡软件2.3 中文免费版
万能搜索器(能搜索百度屏蔽的资源)中文绿色
伽卡他卡学生端终结者1.0 绿色版
华为ONT维修使能工具2.0 简体中文免费版