網站輔助的小工具，它能針對網站進行快速批量的爬取，小米范網站批量爬蟲工具能將爬取的URL進一步調用wvs、sqlmap、brutexss等工具進行檢測，挺實用，也蠻簡單，有需要的可以試試！
小米范網站批量爬蟲工具怎么用
使用方法
隨便點擊下面的任一個文件
出現如下界面時，點任意鍵運行。
打開軟件界面后，點擊新建任務，輸入要檢測的URL。
設置子域名白名單，屬于白名單域名的URL則自動保留并進行抓取。
設置并發站點、并發線程等參數，點擊開始即可。
小米范網站批量爬蟲工具工作流程
假設我們新建任務，放入100個URL作為爬蟲的起始URL，那么具體的爬取過程如下：
1、針對這100個URL，按照是否同源進行合并，同源的URL則放入一個目標，并將這些URL作為這個源的起始URL。
2、針對每個目標進行爬取（默認并發5個目標），針對每個目標的起始URL采用瀏覽器點擊抓包（默認每個目標最多開5個瀏覽器）+HTML解析的方式獲取URL，瀏覽器點擊在后臺運行，沒有界面，這里的瀏覽器點只是在點擊后將發出去的請求URL記錄，但并不真正發出去請求。
3、將前兩步收集到的URL作為種子，進行傳統的爬取，這里的爬取主要采用了webmagic框架，并對框架本身做了一點修改。另外每一個頁面下載之前會進行爬取URL黑名單匹配，匹配到黑名單則跳過，下載到的每個頁面提取出來的URL會進行子域名白名單匹配，匹配到白名單則會放入爬取隊列。
針對爬到的URL可直接右鍵使用sqlmap、brutexss、panoptic、wvs進行安全檢測，目前還在考慮再加入一些其他的檢測工具。
此外也提供了目錄掃描功能，在左側樹形結構的任意節點右鍵目錄掃描會對當前選中節點所在的路徑進行目錄掃描。
- PC官方版
- 安卓官方手機版
- IOS官方手機版
鮮牛網游加速器4.6.6.2 電腦版
cFosSpeed破解版12.50.2525 中文免費版
奇游電競加速器6.4.3 官方最新版
網易UU網游加速器(可免費加速steam)4.45.0 官方最新版
besttrace電腦版3.9.1.0 官方版
谷歌訪問助手(Google Helper插件)2.6.2 官方版
speedtest網絡測速軟件1.8.156.1 單文件版
systemview通信系統仿真軟件5.0 免費版
Windows U-Finder2.1.4 廠商免費版
水星MWU300T WPS安裝程序1.0 官方安裝版
綠聯HDMI矩陣 RS232上位機軟件1.10.01 綠色官方版
綠聯云智能云存儲pc版2.4.0.1915 一鍵安裝版
cFosSpeed網絡流量優化軟件12.00.2512 免序列號去試用限制版
IP監測微信提醒工具(IPMonitor)2.0 免費版
新華三模擬器HCL2.1.2 最新版
佛山職業技術學院校園網登錄軟件0.2 破解版
局域網ip自動分配工具(運維/技術人員IP配置工具)1.1 單文件免費版
聯想網課助手2.1.2 中文免費版
Exchang恢復軟件（Shoviv Exchange Recovery Manager）19.11 英文特別版
Win10熱點開機自啟工具1.0 中文免費版
HS8145C5獲取超級密碼工具集合3 in 1 中文免費版
騰訊微云pc版5.2.1282 官方最新版
愛站工具包(愛站seo工具包)1.11.25.0 最新破解版
電信寬帶上網助手9.5.2101.1318 官方版
獵豹免費wifi電腦版5.1 校園版
聯想滑塊驗證助手1.1 單文件免費版
指定硬件廠商MAC地址生成工具1.0 中文免費版
ER系列路由器ISP數據庫文件1.6版本
TP-LINK Web網管交換機客戶端應用程序1.0.3 官網免費版
華為配置加解密工具1.0 簡體中文版
全新 NETGEAR 網件精靈2.4.62 官方中文版
360隨身wifi軟件pc端
快牙電腦版2.8.0.0 官方最新版
愛微幫媒體版客戶端2.16 官方最新版
蒲公英WiFi電腦端2.0.3官方版
WiFi共享大師3.0.0.6 官方最新版
360三代搶票神器(360搶票王軟件)8.1.1.156官方正式版【2017】
青青草原WiFi電腦版5.2 免費版
TFTP全自動智能路由刷固件軟件1.688 官網最
IP管理專家(局域網管理工具)V4.0 簡體中文版
內網地址檢測工具(局域網地址檢測器)1.6 中
淘寶圖片抓取工具1.1 綠色免費版 【2015】
種子搜索神器(p2psearcher)7.0.8 綠色免安
HCE300系列磁卡寫卡軟件2.3 中文免費版
萬能搜索器(能搜索百度屏蔽的資源)中文綠色
伽卡他卡學生端終結者1.0 綠色版
華為ONT維修使能工具2.0 簡體中文免費版