建议使用以下浏览器,以获得最佳体验。 IE 9.0+以上版本 Chrome 31+谷歌浏览器 Firefox 30+ 火狐浏览器

Web漏洞扫描原理是什么_web漏洞扫描有什么作用

发布者:大客户经理   |    本文章发表于:2023-04-22       阅读数:1368

  Web漏洞扫描原理是什么呢?相信很多人都不清楚其中的原理是什么,作为一个独立的服务运行在产品的系统之中,它通过收发消息和外部的产品进行交互。web漏洞扫描有什么作用呢?今天就跟着小编一起来了解下关于web漏洞扫描,学会利用web漏洞扫描来提高扫描引擎的性能。

 

  Web漏洞扫描原理是什么?

 

  Web扫描引擎,产品通过向引擎发送一条消息来创建/暂停/停止/续扫一个任务,而引擎则通过消息告诉外界自己的状态、已经爬取的链接和已经检测到的漏洞;同时产品也可以通过消息来设置引擎的日志级别,系统使用带宽等属性。

 

  对于某一特定的扫描任务,扫描引擎的作用可以理解为通过不断发现新的页面,将爬虫和插件的工作持续进行下去,直到整个站点被处理完或者达到某种设置的门限。Web应用漏洞扫描从大的方面可以分为页面爬取、探测点发现和漏洞检测三个阶段。Web扫描引擎将第一个阶段由爬虫独立完成,后两个阶段依赖于第一个阶段的结果,由插件独立完成。爬虫和插件之间可以同时进行,也可以等爬虫将站点爬完之后,再统一交给插件处理。

 

  1、页面爬取

 

  页面爬取使用智能页面爬取技术,重点在于快而全地获取整个站点的站点树。这个过程分为两步,网络访问和链接抽取。网络访问需要支持设置cookie,自定义请求头,设置代理(http,https,sock4,sock5),支持各种认证方式(basic,ntml,digest),客户端证书等。拿到响应之后,需要自动识别响应的编码方式,并将其转换为统一的UTF-8编码,供后续抽取链接等操作使用。目前支持从HTML,HTML注释,Flash,WSDL等静态内容中抽取链接之外,还用webkit实现了从DOM树,JS,Ajax等重抽取静态和动态的链接。

 

  除了使用前文提到的各种爬取设置和智能技术之外,还需要对站点做存活性判断、主动识别页面类型(图片,外部链接,二进制文件,其它纯静态文件等)、尝试猜测一些无法从其他页面解析出来的但可能存在的目录并做好标记。存活性判断主要是为了迅速给出站点是否可达(可能跟用户的输入,配置的代理、认证信息,站点本身都有关系)的一个结论,避免做一些无用功;页面类型主要为了帮助插件区分哪些页面可能存在漏洞需要被扫,哪些页面可以直接跳过;根据一定的字典猜测可能存在的链接,一方面是为了尽可能多地发现页面,另一方面是为了方便插件直接根据猜测的标记报告敏感文件的漏洞。

 

  通过爬取的时候获取并标记尽可能多的信息,可以极大地减少逻辑冗余,提高扫描引擎的性能。

 

  2、探测点发现

 

  不同的插件有针对性地在请求中寻找不同的探测点,可能的探测点有URL路径,GET方法URL中的参数,POST方法请求体中的参数,请求头中的字段,cookie中的键值,响应体等等。一般而言,插件会尝试对待扫描的URL进行解析,分解出各种可能存在漏洞的探测点,供后续进行相关的漏洞检测。

 

  3、漏洞检测

 

  每个具体的漏洞都有相应的一个插件来进行具体的检测。插件根据得到的探测点,有针对性地构造特殊的网络请求,使用远程网站漏洞扫描检测技术进行漏洞检测,判断是否存在相应的漏洞。除了使用到的漏洞检测技术之外,为了缓解网络访问带来的性能问题,在需要发送多种探测请求的插件中,将网络请求并发而将网络响应的处理串行起来提高扫描速度;为了避免在短时间内发送重复的网络请求(某些插件不需要重新构造请求体,使用的是和爬虫一样的网络请求),使用了页面缓存技术,旨在降低网络访问对扫描速度的影响;引擎在扫描的过程中,能够根据系统当时的负载,自动调节处理URL的并发进程数(不超过任务配置的进程数的前提下),从而获得一个最佳的系统吞吐量。

 

  对于漏洞检测,分为两大类的漏洞进行检测:

 

  1.针对URL的漏洞扫描:

 

  例如XSS:对将要扫描的URL进行拆分,然后针对每个参数进行检测,首先会在原有参数值后面添加一个正常的字符串,从响应页面内容中查找输入的字符串是否存在,并且分析上下文,根据分析的结果,再次重新输入特定的字符串,继续通过分析上下文,判断所输入的特定的字符串是否能被执行,如果不行或者是输入的某些字符串被过滤,则会重新输入其他的特定字符串进行验证。

 

  2.针对开源CMS的特定漏洞扫描

 

  例如Wordpress:在爬虫爬取的时候,会通过网站的一些特征进行识别,如果识别出当前被扫描站点使用了wordpress,则会调用WEB扫描引擎中wordpress相关的所有漏洞检测插件,通过这些检测插件,发现存在于wordpress的特定漏洞。

 

  采用多视角对扫描结果进行分析,系统提供了多种类型的报表满足多种报表需求,普通的综述报表和单站点报表,单个站点的趋势报表,多个站点的对比报表,支持OWASP top10分类的行业报表。综述报表从任务的角度对任务中包含的单个或多个站点进行整体的风险评估,展示高中低风险以及页面风险的分布,并从漏洞的角度展示了受影响的站点,以及漏洞的描述信息及解决方案。单站点报表详细的从风险分类的角度展示了单个站点在各风险类型的漏洞分布,站点存在漏洞的详细列表,站点树及外链的信息。趋势报表展示了单个站点的高中低漏洞数以及风险值的趋势变化情况,并且从漏洞的角度突出多次扫描漏洞的新发现和已解决情况。对比报表用来对比不同站点的风险分布以及漏洞分布情况,能帮助管理员快速进行多个站点的风险排名。系统中对所有漏洞进行了OWASP-2010,OWASP-2013,WASC分类,报表同时也支持OWASP-2010,OWASP-2013,WASC三种行业报表。同时报表支持多种格式:HTML,WORD,PDF,XML。


Web漏洞扫描原理是什么

 

  4、高速引擎

 

  web扫描引擎为了突破性能瓶颈,分别采取爬取和扫描分离、高网络并发、本地缓存、自适应动态调整等技术来给引擎加速。

 

  1.爬取和扫描分离使得模块耦合降低的同时,也减少了逻辑之间的等待与依赖,使得爬取和扫描都可以只关注自己的业务,为性能加分。

 

  2.由于web扫描属于网络密集型的扫描,网络访问时间对扫描速度影响很大,高网络并发的目的就是将耗时的操作进行并发处理,让外部耗时尽可能降到最低。

 

  3.爬虫和插件的扫描有大量的重复的网络请求,通过本地缓存使相同的请求只访问服务器一次,节省了大量的网络访问时间。

 

  4.自适应动态调整是引擎内部会根据引擎的全局并发数设置和实际消耗的系统资源(主要是CPU和内存)动态调整扫描的并发进程数,使得系统资源能得到最充分的合理使用,提高扫描的整体性能

 

  5、智能页面爬取技术

 

  基于模拟点击技术的智能爬虫能高效并尽可能多的抓取网站页面,主要组成部分包含两个部件,部件一用于爬虫策略的控制、登陆验证数据的控制、及自定义可爬取页面、不可爬取页面的控制等,称为控制部件;部件二用于提取页面内连接,通过模拟点击技术来操纵DOM数据模型,并通过截获脚本执行数据达到提取链接和阻止对服务器数据的破坏,称为处理部件。

 

  控制部件将站点url作为参数传递给处理部件,处理部件从目标web服务器获取web页面,并通过内置浏览器内核将获取的html文档解析成DOM数据模型。然后通过对htlm文档中的不同标记做处理,来提取web页面中的url。在处理script标记的时候,会对其中的用户点击单元进行模拟点击处理,就是模拟人的点击行为来触发点击事件。并在引发DOM数据的变更前截获url,同时拦截对DOM模型的修改,这样既达到了url的提取,又防止了对数据的修改。

 

  其技术优势包括:

 

  1.高效率,智能爬虫通过对页面进行消重处理,大大提高了对网站扫描的速度

 

  2.支持多种控制策略来删选URL

 

  3.Javascript解析引擎的支持能力,能从Javascript代码中分析出url

 

  4.支持从flash文件里提取链接

 

  5.支持通过代理进行爬取目标网站

 

  6.支持通过协议认证进行扫描

 

  7.支持对扫描范围的控制,可扫描整个域,子域,当前目录

 

  8.智能爬虫采用多线程的方式,以提高页面抓取的速度。同时控制线程数目,防止大量并发对用户的单个站点造成过大压力

 

  6、自适应扫描技术

 

  WEB扫描器需要根据实际的生产环境,被扫描站点等因素来调节扫描相关的参数配置,达到平衡压力,有效利用资源的目的。

 

  不妨假定引擎的速度仅仅通过扫描的并发数就可以随意调节,那么对用户有意义的“快”可以理解为:在不影响web扫描设备其它功能,不会占完扫描设备所在网络的带宽,不会使被扫描服务器响应变慢乃至宕机的前提下,所能允许的最大的扫描并发数扫描所能达到的速度。其实就是用系统的CPU,内存,网卡信息以及被扫描服务器的响应时间作为反馈,来调节web扫描的并发数,使扫描不对自身和扫描目标造成过分的影响,能最快地完成扫描任务。web扫描引擎内部模拟现实地设置了4类传感器,分别是CPU传感器,内存传感器,网卡传感器和响应传感器。

 

  前3类传感器属于扫描器系统级别的传感器,而第四类则属于扫描任务级别的传感器。每类传感器都有自己的正常工作阈值,采样值高于阈值的传回1,低于阈值的传回-1,在阈值范围内的传回。

 

  自适应扫描就是通过设置者四类传感器,获取各种反馈信息,然后综合判断,做出如何调节并发数的决策。若有任何一个传感器传回1,则意味着某个指标已经在危险的边缘了,应该采取措施避免更严重的问题发生,此时扫描并发数应该降低;若所有的传感器都传回-1,则意味着系统本身和目标站点都比较闲,应该采取措施,加大系统负荷,此时扫描并发数应该升高;否则的话,保持扫描并发数不变。

 

  技术优势:

 

  目标“零”损伤,链路“零”占用。

 

  随业务带宽不规律的震荡变换,在不侵占业务带宽的同时,最大程度地利用链路剩余带宽作为扫描带宽

 

  低带宽也能扫

 

  灵活适应多类扫描场景(低带宽,闲忙分离…)

 

  稳定易用

 

  参数自动调优,简单省时

 

  最大化地利用设备的资源

 

  7、远程网页挂马检测技术

 

  网页挂马攻击是指攻击者在获取网站或者网站服务器的部分或者全部权限(获取手段包括SQL注入、XSS攻击等)之后,在网页文件中嵌入一段恶意代码,这些恶意代码主要是一些包括浏览器本身漏洞、第三方ActiveX漏洞或者其它插件漏洞的利用代码,用户访问该挂马页面时,如果系统没有更新恶意代码中利用的漏洞补丁,则会执行恶意代码程序,进行盗号等危险操作。

 

  远程网页挂马检测技术使用的是静态分析和动态解析相结合的主动挂马检测技术。检测实现原理可简单如下描述:挂马检测引擎模拟DOM对象和ActiveX控件,同时截获其内存分配行为,当被挂马代码想操作一个DOM对象或ActiveX控件时,就可以把他的超过行为全部监控下来。有了这种url页面的所有展示行为的监控,就可以分析这些行为,按照预定义的规则来判断是否有恶意代码的存在。判断方式有通过ActiveX的ID判断、通过对象的接口调用来判断和通过HeapSpray检测来判断,这三种判断方法保证了检测的高准确率。

 

  web漏洞扫描有什么作用?

 

  1、降低资产所面临的风险

 

  漏洞的典型特征:系统的缺陷/弱点、可能被威胁利用于违反安全策略、可能导致系统的安全性被破坏。 从信息安全风险评估规范GB/T 20984可以知道,分析风险的计算公式为:总风险 = 威胁 * 漏洞(脆弱性) * 资产价值。 由此可见漏洞是计算风险的重要变量,漏洞越严重,资产面临的风险越高。通过漏洞扫描及时发现漏洞,及时修复高危漏洞,能够有效降低资产的风险。

 

  2、满足法律合规要求

 

  2017年生效的网络安全法,作为上位法,明确了中国实施网络安全等级保护制度。而在网络安全等级保护测评过程指南GB/T 28449-2018这一标准中,则明确给出了对于二/三/四级系统的测评要求,漏洞扫描无疑是已写入其中的重要组成部分。

 

  以上就是关于Web漏洞扫描原理是什么的相关解答,随着计算机技术和信息技术的发展,Web应用系统在各个领域都得到了广泛的应用。在网络安全这块,web漏洞扫描有独特的作用,为企业减轻不少后顾之忧。想要了解更多关于Web漏洞扫描相关知识的,记得关注快快网络。


相关文章 点击查看更多文章>
01

web漏洞扫描方向是什么?漏洞扫描和渗透测试的区别

  Web漏洞扫描就是建立Web安全的一个重要保障。web漏洞扫描方向是什么呢?其实web漏洞扫描能够有效检测和发展系统存在的漏洞和不安全因素,在保障企业的网络安全和系统管理上有着重要的作用,现在已经越来越多的企业都离不开web漏洞扫描。   web漏洞扫描方向是什么?   1. 基于应用的检测技术   它采用被动的、非破坏性的办法检查应用软件包的设置,发现安全漏洞。   2.基于主机的检测技术   它采用被动的、非破坏性的办法对系统进行检测。通常,它涉及到系统的内核、文件的属性、操作系统的补丁等。这种技术还包括口令解密、把一些简单的口令剔除。因此,这种技术可以非常准确地定位系统的问题,发现系统的漏洞。它的缺点是与平台相关,升级复杂。   3.基于目标的漏洞检测技术   它采用被动的、非破坏性的办法检查系统属性和文件属性,如数据库、注册号等。通过消息文摘算法,对文件的加密数进行检验。这种技术的实现是运行在一个闭环上,不断地处理文件、系统目标、系统目标属性,然后产生检验数,把这些检验数同原来的检验数相比较。一旦发现改变就通知管理员。   4. 基于网络的检测技术   它采用积极的、非破坏性的办法来检验系统是否有可能被攻击崩溃。它利用了一系列的脚本模拟对系统进行攻击的行为,然后对结果进行分析。它还针对已知的网络漏洞进行检验。网络检测技术常被用来进行穿透实验和安全审记。这种技术可以发现一系列平台的漏洞,也容易安装。但是,它可能会影响网络的性能。   漏洞扫描和渗透测试的区别   概念不同:渗透测试这一过程包括对系统的任何弱点、技术缺陷或漏洞的主动分析,而分析是从一个攻击者可能存在的位置来进行的,并且从这个位置有条件的主动利用安全漏洞。漏洞扫描简称漏扫,是指基于漏洞数据库,通过扫描等手段对指定的远程或本地计算机系统的安全脆弱性进行检测、发现可利用漏洞的一种安全检测手段。漏洞扫描一般可分为网络扫描和主机扫描。   操作方式不同:渗透测试的一般过程主要有明确目标、信息收集、漏洞探测、漏洞验证、信息分析、获取所需、信息整理、形成测试报告。漏洞扫描是在网络设备中发现已经存在的漏洞,比如防火墙、路由器、交换机、服务器等各种应用,该过程是自动化的,主要针对的是网络或应用层上潜在的及已知的漏洞。漏洞的扫描过程中是不涉及漏洞利用的。   性质不同:渗透测试的侵略性要强很多,它会试图使用各种技术手段攻击真实生产环境;相反,漏洞扫描只会以一种非侵略性的方式,仔细地定位和量化系统的所有漏洞。   消耗的成本时间不同:渗透测试需要前期进行各种准备工作,前期信息资产收集的越全面,后期的渗透就会越深入,不仅是一个由浅入深的过程,更是一个连锁反应;而漏洞扫描相比来说消耗的时间要少很多。   web漏洞扫描指基于漏洞数据库,通过扫描等手段对指定的远程或者本地计算机系统的安全脆弱性进行检测,发现可利用漏洞的一种安全检测行为。特别是容易受到攻击的企业更应该合理有效运用web漏洞扫描保障自己的安全。

大客户经理 2023-07-10 11:03:00

02

常见的web漏洞有哪些?

  随着互联网的发展,网络攻击成为大家头疼的问题。Web业务的迅速发展吸引了黑客们的热切关注,常见的web漏洞有哪些?今天快快网络小编就跟大家详细介绍下web漏洞的问题。   常见的web漏洞有哪些?   一、SQL注入漏洞   SQL 注入攻击( SQL Injection ),简称注入攻击、SQL注入,被广泛用于非法获取网站控制权,是发生在应用程序的数据库层上的安全漏洞。在设计程序,忽略了对输入字符串中夹带的SQL指令的检查,被数据库误认为是正常的SQL指令而运行,从而使数据库受到攻击,可能导致数据被窃取、更改、删除,以及进一步导致网站被嵌入恶意代码、被植入后门程序等危害。   二、跨站脚本漏洞   跨站脚本攻击(Cross-site scripting,通常简称为XSS)发生在客户端,可被用于进行窃取隐私、钓鱼欺骗、窃取密码、传播恶意代码等攻击。XSS攻击使用到的技术主要为HTML和Javascript,也包括VBScript和ActionScript等。XSS攻击对WEB服务器虽无直接危害,但是它借助网站进行传播,使网站的使用用户受到攻击,导致网站用户帐号被窃取,从而对网站也产生了较严重的危害。   三、弱口令漏洞   弱口令(weak password) 没有严格和准确的定义,通常认为容易被别人(他们有可能对你很了解)猜测到或被破解工具破解的口令均为弱口令。   四、HTTP报头追踪漏洞   HTTP/1.1(RFC2616)规范定义了HTTP TRACE方法,主要是用于客户端通过向Web服务器提交TRACE请求来进行测试或获得诊断信息。当Web服务器启用TRACE时,提交的请求头会在服务器响应的内容(Body)中完整的返回,其中HTTP头很可能包括Session Token、Cookies或其它认证信息。   攻击者可以利用此漏洞来欺骗合法用户并得到他们的私人信息。该漏洞往往与其它方式配合来进行有效攻击,由于HTTP TRACE请求可以通过客户浏览器脚本发起(如XMLHttpRequest),并可以通过DOM接口来访问,因此很容易被攻击者利用。   五、Struts2远程命令执行漏洞   ApacheStruts是一款建立Java web应用程序的开放源代码架构。Apache Struts存在一个输入过滤错误,如果遇到转换错误可被利用注入和执行任意Java代码。 网站存在远程代码执行漏洞的大部分原因是由于网站采用了Apache Struts Xwork作为网站应用框架,由于该软件存在远程代码执高危漏洞,导致网站面临安全风险。   六、文件上传漏洞   文件上传漏洞通常由于网页代码中的文件上传路径变量过滤不严造成的,如果文件上传功能实现代码没有严格限制用户上传的文件后缀以及文件类型,攻击者可通过Web访问的目录上传任意文件,包括网站后门文件( webshell ),进而远程控制网站服务器。因此,在开发网站及应用程序过程中,需严格限制和校验上传的文件,禁止上传恶意代码的文件。同时限制相关目录的执行权限,防范webshell攻击。   七、私有IP地址泄露漏洞   IP地址是网络用户的重要标示,是攻击者进行攻击前需要了解的。获取的方法较多,攻击者也会因不同的网络情况采取不同的方法,如:在局域网内使用Ping指令, Ping对方在网络中的名称而获得IP;在Internet上使用IP版的QQ直接显示。最有效的办法是截获并分析对方的网络数据包。攻击者可以找到并直接通过软件解析截获后的数据包的IP 包头信息,再根据这些信息了解具体的IP。   针对最有效的“数据包分析方法”而言,就可以安装能够自动去掉发送数据包包头IP信息的一些软件。不过使用这些软件有些缺点, 譬如:耗费资源严重,降低计算机性能;访问一些论坛或者网站时会受影响;不适合网吧用户使用等等。   现在的个人用户采用最普及隐藏IP 的方法应该是使用代理,由于使用代理服务器后,“转址服务”会对发送出去的数据包有所修改,致使“数据包分析”的方法失效。一些容易泄漏用户IP 的网络软件(QQ 、MSN 、IE 等)都支持使用代理方式连接Internet ,特别是QQ 使用“ ezProxy ”等代理软件连接后, IP版的QQ都无法显示该IP地址。虽然代理可以有效地隐藏用户IP,但攻击者亦可以绕过代理, 查找到对方的真实IP地址,用户在何种情况下使用何种方法隐藏IP,也要因情况而论。   八、未加密登录请求   由于Web 配置不安全, 登陆请求把诸如用户名和密码等敏感字段未加密进行传输,攻击者可以窃听网络以劫获这些敏感信息。   九、敏感信息泄露漏洞   SQL 注入、XSS、目录遍历、弱口令等均可导致敏感信息泄露,攻击者可以通过漏洞获得敏感信息。   以上就是常见的web漏洞,web漏洞将给企业带来难以承受的影响,所以对于企业来说需要及时发现和处理web漏洞,web应用中的计算机安全漏洞的处理是很重要的。在互联网时代只要漏洞的扫描至关重要。

大客户经理 2023-09-29 11:45:00

03

web漏洞扫描有什么作用?漏洞扫描会影响系统性能吗

  web漏洞扫描有什么作用呢?我们经常会听到关于漏洞扫描,但是具体的功能还不清楚。漏洞扫描可能会影响系统性能,具体取决于扫描的范围、深度、频率和扫描工具的设置等因素。   web漏洞扫描有什么作用?   1、 发现潜在安全风险   Web漏洞扫描是一种自动化的方法,用于检测Web应用程序中可能存在的安全漏洞。这有助于开发人员和安全专家发现潜在的安全风险,从而可以在漏洞被黑客利用之前对其进行修复。   2、提高系统安全性   通过定期进行Web漏洞扫描,开发人员和安全专家可以评估系统的安全性,确保已经采取了适当的措施来保护敏感数据和资源。   3、遵守法规和行业标准   许多法规和行业标准要求组织定期进行Web漏洞扫描,以确保其符合特定的安全要求。通过执行这些扫描,组织可以遵守法规,并确保客户数据得到适当的保护。   4、提高客户信任   通过定期进行Web漏洞扫描并采取相应的修复措施,组织可以提高客户信任,表明他们重视客户数据的安全。   漏洞扫描会影响系统性能吗?   扫描范围和深度   漏洞扫描的范围和深度会影响系统性能的影响程度。如果扫描范围和深度过大,可能会占用系统资源,导致系统变慢或崩溃。因此,应该根据系统的特点和安全风险的变化情况来确定扫描范围和深度。   扫描频率   漏洞扫描的频率也会影响系统性能的影响程度。如果扫描频率过高,可能会占用系统资源,导致系统变慢或崩溃。因此,应该根据系统的特点和安全风险的变化情况来确定扫描频率。   扫描时间   漏洞扫描的时间也会影响系统性能的影响程度。如果扫描时间与系统的高峰期重合,可能会影响系统的性能和稳定性。因此,应该选择系统空闲期进行漏洞扫描。   扫描工具的设置   不同的漏洞扫描工具具有不同的设置选项,如扫描速度、扫描深度、线程数量等。根据系统的特点和安全风险的变化情况来确定合适的设置选项,以减少漏洞扫描对系统性能的影响。   看完文章我们就能清楚知道web漏洞扫描有什么作用?Web服务器漏洞扫描是指对Web服务器进行全面的漏洞扫描,以发现潜在的安全风险,这样对于我们来说才能及时发现漏洞进行补救。

大客户经理 2023-10-16 11:33:00

新闻中心 > 市场资讯

大客户经理
查看更多文章 >
Web漏洞扫描原理是什么_web漏洞扫描有什么作用

发布者:大客户经理   |    本文章发表于:2023-04-22

  Web漏洞扫描原理是什么呢?相信很多人都不清楚其中的原理是什么,作为一个独立的服务运行在产品的系统之中,它通过收发消息和外部的产品进行交互。web漏洞扫描有什么作用呢?今天就跟着小编一起来了解下关于web漏洞扫描,学会利用web漏洞扫描来提高扫描引擎的性能。

 

  Web漏洞扫描原理是什么?

 

  Web扫描引擎,产品通过向引擎发送一条消息来创建/暂停/停止/续扫一个任务,而引擎则通过消息告诉外界自己的状态、已经爬取的链接和已经检测到的漏洞;同时产品也可以通过消息来设置引擎的日志级别,系统使用带宽等属性。

 

  对于某一特定的扫描任务,扫描引擎的作用可以理解为通过不断发现新的页面,将爬虫和插件的工作持续进行下去,直到整个站点被处理完或者达到某种设置的门限。Web应用漏洞扫描从大的方面可以分为页面爬取、探测点发现和漏洞检测三个阶段。Web扫描引擎将第一个阶段由爬虫独立完成,后两个阶段依赖于第一个阶段的结果,由插件独立完成。爬虫和插件之间可以同时进行,也可以等爬虫将站点爬完之后,再统一交给插件处理。

 

  1、页面爬取

 

  页面爬取使用智能页面爬取技术,重点在于快而全地获取整个站点的站点树。这个过程分为两步,网络访问和链接抽取。网络访问需要支持设置cookie,自定义请求头,设置代理(http,https,sock4,sock5),支持各种认证方式(basic,ntml,digest),客户端证书等。拿到响应之后,需要自动识别响应的编码方式,并将其转换为统一的UTF-8编码,供后续抽取链接等操作使用。目前支持从HTML,HTML注释,Flash,WSDL等静态内容中抽取链接之外,还用webkit实现了从DOM树,JS,Ajax等重抽取静态和动态的链接。

 

  除了使用前文提到的各种爬取设置和智能技术之外,还需要对站点做存活性判断、主动识别页面类型(图片,外部链接,二进制文件,其它纯静态文件等)、尝试猜测一些无法从其他页面解析出来的但可能存在的目录并做好标记。存活性判断主要是为了迅速给出站点是否可达(可能跟用户的输入,配置的代理、认证信息,站点本身都有关系)的一个结论,避免做一些无用功;页面类型主要为了帮助插件区分哪些页面可能存在漏洞需要被扫,哪些页面可以直接跳过;根据一定的字典猜测可能存在的链接,一方面是为了尽可能多地发现页面,另一方面是为了方便插件直接根据猜测的标记报告敏感文件的漏洞。

 

  通过爬取的时候获取并标记尽可能多的信息,可以极大地减少逻辑冗余,提高扫描引擎的性能。

 

  2、探测点发现

 

  不同的插件有针对性地在请求中寻找不同的探测点,可能的探测点有URL路径,GET方法URL中的参数,POST方法请求体中的参数,请求头中的字段,cookie中的键值,响应体等等。一般而言,插件会尝试对待扫描的URL进行解析,分解出各种可能存在漏洞的探测点,供后续进行相关的漏洞检测。

 

  3、漏洞检测

 

  每个具体的漏洞都有相应的一个插件来进行具体的检测。插件根据得到的探测点,有针对性地构造特殊的网络请求,使用远程网站漏洞扫描检测技术进行漏洞检测,判断是否存在相应的漏洞。除了使用到的漏洞检测技术之外,为了缓解网络访问带来的性能问题,在需要发送多种探测请求的插件中,将网络请求并发而将网络响应的处理串行起来提高扫描速度;为了避免在短时间内发送重复的网络请求(某些插件不需要重新构造请求体,使用的是和爬虫一样的网络请求),使用了页面缓存技术,旨在降低网络访问对扫描速度的影响;引擎在扫描的过程中,能够根据系统当时的负载,自动调节处理URL的并发进程数(不超过任务配置的进程数的前提下),从而获得一个最佳的系统吞吐量。

 

  对于漏洞检测,分为两大类的漏洞进行检测:

 

  1.针对URL的漏洞扫描:

 

  例如XSS:对将要扫描的URL进行拆分,然后针对每个参数进行检测,首先会在原有参数值后面添加一个正常的字符串,从响应页面内容中查找输入的字符串是否存在,并且分析上下文,根据分析的结果,再次重新输入特定的字符串,继续通过分析上下文,判断所输入的特定的字符串是否能被执行,如果不行或者是输入的某些字符串被过滤,则会重新输入其他的特定字符串进行验证。

 

  2.针对开源CMS的特定漏洞扫描

 

  例如Wordpress:在爬虫爬取的时候,会通过网站的一些特征进行识别,如果识别出当前被扫描站点使用了wordpress,则会调用WEB扫描引擎中wordpress相关的所有漏洞检测插件,通过这些检测插件,发现存在于wordpress的特定漏洞。

 

  采用多视角对扫描结果进行分析,系统提供了多种类型的报表满足多种报表需求,普通的综述报表和单站点报表,单个站点的趋势报表,多个站点的对比报表,支持OWASP top10分类的行业报表。综述报表从任务的角度对任务中包含的单个或多个站点进行整体的风险评估,展示高中低风险以及页面风险的分布,并从漏洞的角度展示了受影响的站点,以及漏洞的描述信息及解决方案。单站点报表详细的从风险分类的角度展示了单个站点在各风险类型的漏洞分布,站点存在漏洞的详细列表,站点树及外链的信息。趋势报表展示了单个站点的高中低漏洞数以及风险值的趋势变化情况,并且从漏洞的角度突出多次扫描漏洞的新发现和已解决情况。对比报表用来对比不同站点的风险分布以及漏洞分布情况,能帮助管理员快速进行多个站点的风险排名。系统中对所有漏洞进行了OWASP-2010,OWASP-2013,WASC分类,报表同时也支持OWASP-2010,OWASP-2013,WASC三种行业报表。同时报表支持多种格式:HTML,WORD,PDF,XML。


Web漏洞扫描原理是什么

 

  4、高速引擎

 

  web扫描引擎为了突破性能瓶颈,分别采取爬取和扫描分离、高网络并发、本地缓存、自适应动态调整等技术来给引擎加速。

 

  1.爬取和扫描分离使得模块耦合降低的同时,也减少了逻辑之间的等待与依赖,使得爬取和扫描都可以只关注自己的业务,为性能加分。

 

  2.由于web扫描属于网络密集型的扫描,网络访问时间对扫描速度影响很大,高网络并发的目的就是将耗时的操作进行并发处理,让外部耗时尽可能降到最低。

 

  3.爬虫和插件的扫描有大量的重复的网络请求,通过本地缓存使相同的请求只访问服务器一次,节省了大量的网络访问时间。

 

  4.自适应动态调整是引擎内部会根据引擎的全局并发数设置和实际消耗的系统资源(主要是CPU和内存)动态调整扫描的并发进程数,使得系统资源能得到最充分的合理使用,提高扫描的整体性能

 

  5、智能页面爬取技术

 

  基于模拟点击技术的智能爬虫能高效并尽可能多的抓取网站页面,主要组成部分包含两个部件,部件一用于爬虫策略的控制、登陆验证数据的控制、及自定义可爬取页面、不可爬取页面的控制等,称为控制部件;部件二用于提取页面内连接,通过模拟点击技术来操纵DOM数据模型,并通过截获脚本执行数据达到提取链接和阻止对服务器数据的破坏,称为处理部件。

 

  控制部件将站点url作为参数传递给处理部件,处理部件从目标web服务器获取web页面,并通过内置浏览器内核将获取的html文档解析成DOM数据模型。然后通过对htlm文档中的不同标记做处理,来提取web页面中的url。在处理script标记的时候,会对其中的用户点击单元进行模拟点击处理,就是模拟人的点击行为来触发点击事件。并在引发DOM数据的变更前截获url,同时拦截对DOM模型的修改,这样既达到了url的提取,又防止了对数据的修改。

 

  其技术优势包括:

 

  1.高效率,智能爬虫通过对页面进行消重处理,大大提高了对网站扫描的速度

 

  2.支持多种控制策略来删选URL

 

  3.Javascript解析引擎的支持能力,能从Javascript代码中分析出url

 

  4.支持从flash文件里提取链接

 

  5.支持通过代理进行爬取目标网站

 

  6.支持通过协议认证进行扫描

 

  7.支持对扫描范围的控制,可扫描整个域,子域,当前目录

 

  8.智能爬虫采用多线程的方式,以提高页面抓取的速度。同时控制线程数目,防止大量并发对用户的单个站点造成过大压力

 

  6、自适应扫描技术

 

  WEB扫描器需要根据实际的生产环境,被扫描站点等因素来调节扫描相关的参数配置,达到平衡压力,有效利用资源的目的。

 

  不妨假定引擎的速度仅仅通过扫描的并发数就可以随意调节,那么对用户有意义的“快”可以理解为:在不影响web扫描设备其它功能,不会占完扫描设备所在网络的带宽,不会使被扫描服务器响应变慢乃至宕机的前提下,所能允许的最大的扫描并发数扫描所能达到的速度。其实就是用系统的CPU,内存,网卡信息以及被扫描服务器的响应时间作为反馈,来调节web扫描的并发数,使扫描不对自身和扫描目标造成过分的影响,能最快地完成扫描任务。web扫描引擎内部模拟现实地设置了4类传感器,分别是CPU传感器,内存传感器,网卡传感器和响应传感器。

 

  前3类传感器属于扫描器系统级别的传感器,而第四类则属于扫描任务级别的传感器。每类传感器都有自己的正常工作阈值,采样值高于阈值的传回1,低于阈值的传回-1,在阈值范围内的传回。

 

  自适应扫描就是通过设置者四类传感器,获取各种反馈信息,然后综合判断,做出如何调节并发数的决策。若有任何一个传感器传回1,则意味着某个指标已经在危险的边缘了,应该采取措施避免更严重的问题发生,此时扫描并发数应该降低;若所有的传感器都传回-1,则意味着系统本身和目标站点都比较闲,应该采取措施,加大系统负荷,此时扫描并发数应该升高;否则的话,保持扫描并发数不变。

 

  技术优势:

 

  目标“零”损伤,链路“零”占用。

 

  随业务带宽不规律的震荡变换,在不侵占业务带宽的同时,最大程度地利用链路剩余带宽作为扫描带宽

 

  低带宽也能扫

 

  灵活适应多类扫描场景(低带宽,闲忙分离…)

 

  稳定易用

 

  参数自动调优,简单省时

 

  最大化地利用设备的资源

 

  7、远程网页挂马检测技术

 

  网页挂马攻击是指攻击者在获取网站或者网站服务器的部分或者全部权限(获取手段包括SQL注入、XSS攻击等)之后,在网页文件中嵌入一段恶意代码,这些恶意代码主要是一些包括浏览器本身漏洞、第三方ActiveX漏洞或者其它插件漏洞的利用代码,用户访问该挂马页面时,如果系统没有更新恶意代码中利用的漏洞补丁,则会执行恶意代码程序,进行盗号等危险操作。

 

  远程网页挂马检测技术使用的是静态分析和动态解析相结合的主动挂马检测技术。检测实现原理可简单如下描述:挂马检测引擎模拟DOM对象和ActiveX控件,同时截获其内存分配行为,当被挂马代码想操作一个DOM对象或ActiveX控件时,就可以把他的超过行为全部监控下来。有了这种url页面的所有展示行为的监控,就可以分析这些行为,按照预定义的规则来判断是否有恶意代码的存在。判断方式有通过ActiveX的ID判断、通过对象的接口调用来判断和通过HeapSpray检测来判断,这三种判断方法保证了检测的高准确率。

 

  web漏洞扫描有什么作用?

 

  1、降低资产所面临的风险

 

  漏洞的典型特征:系统的缺陷/弱点、可能被威胁利用于违反安全策略、可能导致系统的安全性被破坏。 从信息安全风险评估规范GB/T 20984可以知道,分析风险的计算公式为:总风险 = 威胁 * 漏洞(脆弱性) * 资产价值。 由此可见漏洞是计算风险的重要变量,漏洞越严重,资产面临的风险越高。通过漏洞扫描及时发现漏洞,及时修复高危漏洞,能够有效降低资产的风险。

 

  2、满足法律合规要求

 

  2017年生效的网络安全法,作为上位法,明确了中国实施网络安全等级保护制度。而在网络安全等级保护测评过程指南GB/T 28449-2018这一标准中,则明确给出了对于二/三/四级系统的测评要求,漏洞扫描无疑是已写入其中的重要组成部分。

 

  以上就是关于Web漏洞扫描原理是什么的相关解答,随着计算机技术和信息技术的发展,Web应用系统在各个领域都得到了广泛的应用。在网络安全这块,web漏洞扫描有独特的作用,为企业减轻不少后顾之忧。想要了解更多关于Web漏洞扫描相关知识的,记得关注快快网络。


相关文章

web漏洞扫描方向是什么?漏洞扫描和渗透测试的区别

  Web漏洞扫描就是建立Web安全的一个重要保障。web漏洞扫描方向是什么呢?其实web漏洞扫描能够有效检测和发展系统存在的漏洞和不安全因素,在保障企业的网络安全和系统管理上有着重要的作用,现在已经越来越多的企业都离不开web漏洞扫描。   web漏洞扫描方向是什么?   1. 基于应用的检测技术   它采用被动的、非破坏性的办法检查应用软件包的设置,发现安全漏洞。   2.基于主机的检测技术   它采用被动的、非破坏性的办法对系统进行检测。通常,它涉及到系统的内核、文件的属性、操作系统的补丁等。这种技术还包括口令解密、把一些简单的口令剔除。因此,这种技术可以非常准确地定位系统的问题,发现系统的漏洞。它的缺点是与平台相关,升级复杂。   3.基于目标的漏洞检测技术   它采用被动的、非破坏性的办法检查系统属性和文件属性,如数据库、注册号等。通过消息文摘算法,对文件的加密数进行检验。这种技术的实现是运行在一个闭环上,不断地处理文件、系统目标、系统目标属性,然后产生检验数,把这些检验数同原来的检验数相比较。一旦发现改变就通知管理员。   4. 基于网络的检测技术   它采用积极的、非破坏性的办法来检验系统是否有可能被攻击崩溃。它利用了一系列的脚本模拟对系统进行攻击的行为,然后对结果进行分析。它还针对已知的网络漏洞进行检验。网络检测技术常被用来进行穿透实验和安全审记。这种技术可以发现一系列平台的漏洞,也容易安装。但是,它可能会影响网络的性能。   漏洞扫描和渗透测试的区别   概念不同:渗透测试这一过程包括对系统的任何弱点、技术缺陷或漏洞的主动分析,而分析是从一个攻击者可能存在的位置来进行的,并且从这个位置有条件的主动利用安全漏洞。漏洞扫描简称漏扫,是指基于漏洞数据库,通过扫描等手段对指定的远程或本地计算机系统的安全脆弱性进行检测、发现可利用漏洞的一种安全检测手段。漏洞扫描一般可分为网络扫描和主机扫描。   操作方式不同:渗透测试的一般过程主要有明确目标、信息收集、漏洞探测、漏洞验证、信息分析、获取所需、信息整理、形成测试报告。漏洞扫描是在网络设备中发现已经存在的漏洞,比如防火墙、路由器、交换机、服务器等各种应用,该过程是自动化的,主要针对的是网络或应用层上潜在的及已知的漏洞。漏洞的扫描过程中是不涉及漏洞利用的。   性质不同:渗透测试的侵略性要强很多,它会试图使用各种技术手段攻击真实生产环境;相反,漏洞扫描只会以一种非侵略性的方式,仔细地定位和量化系统的所有漏洞。   消耗的成本时间不同:渗透测试需要前期进行各种准备工作,前期信息资产收集的越全面,后期的渗透就会越深入,不仅是一个由浅入深的过程,更是一个连锁反应;而漏洞扫描相比来说消耗的时间要少很多。   web漏洞扫描指基于漏洞数据库,通过扫描等手段对指定的远程或者本地计算机系统的安全脆弱性进行检测,发现可利用漏洞的一种安全检测行为。特别是容易受到攻击的企业更应该合理有效运用web漏洞扫描保障自己的安全。

大客户经理 2023-07-10 11:03:00

常见的web漏洞有哪些?

  随着互联网的发展,网络攻击成为大家头疼的问题。Web业务的迅速发展吸引了黑客们的热切关注,常见的web漏洞有哪些?今天快快网络小编就跟大家详细介绍下web漏洞的问题。   常见的web漏洞有哪些?   一、SQL注入漏洞   SQL 注入攻击( SQL Injection ),简称注入攻击、SQL注入,被广泛用于非法获取网站控制权,是发生在应用程序的数据库层上的安全漏洞。在设计程序,忽略了对输入字符串中夹带的SQL指令的检查,被数据库误认为是正常的SQL指令而运行,从而使数据库受到攻击,可能导致数据被窃取、更改、删除,以及进一步导致网站被嵌入恶意代码、被植入后门程序等危害。   二、跨站脚本漏洞   跨站脚本攻击(Cross-site scripting,通常简称为XSS)发生在客户端,可被用于进行窃取隐私、钓鱼欺骗、窃取密码、传播恶意代码等攻击。XSS攻击使用到的技术主要为HTML和Javascript,也包括VBScript和ActionScript等。XSS攻击对WEB服务器虽无直接危害,但是它借助网站进行传播,使网站的使用用户受到攻击,导致网站用户帐号被窃取,从而对网站也产生了较严重的危害。   三、弱口令漏洞   弱口令(weak password) 没有严格和准确的定义,通常认为容易被别人(他们有可能对你很了解)猜测到或被破解工具破解的口令均为弱口令。   四、HTTP报头追踪漏洞   HTTP/1.1(RFC2616)规范定义了HTTP TRACE方法,主要是用于客户端通过向Web服务器提交TRACE请求来进行测试或获得诊断信息。当Web服务器启用TRACE时,提交的请求头会在服务器响应的内容(Body)中完整的返回,其中HTTP头很可能包括Session Token、Cookies或其它认证信息。   攻击者可以利用此漏洞来欺骗合法用户并得到他们的私人信息。该漏洞往往与其它方式配合来进行有效攻击,由于HTTP TRACE请求可以通过客户浏览器脚本发起(如XMLHttpRequest),并可以通过DOM接口来访问,因此很容易被攻击者利用。   五、Struts2远程命令执行漏洞   ApacheStruts是一款建立Java web应用程序的开放源代码架构。Apache Struts存在一个输入过滤错误,如果遇到转换错误可被利用注入和执行任意Java代码。 网站存在远程代码执行漏洞的大部分原因是由于网站采用了Apache Struts Xwork作为网站应用框架,由于该软件存在远程代码执高危漏洞,导致网站面临安全风险。   六、文件上传漏洞   文件上传漏洞通常由于网页代码中的文件上传路径变量过滤不严造成的,如果文件上传功能实现代码没有严格限制用户上传的文件后缀以及文件类型,攻击者可通过Web访问的目录上传任意文件,包括网站后门文件( webshell ),进而远程控制网站服务器。因此,在开发网站及应用程序过程中,需严格限制和校验上传的文件,禁止上传恶意代码的文件。同时限制相关目录的执行权限,防范webshell攻击。   七、私有IP地址泄露漏洞   IP地址是网络用户的重要标示,是攻击者进行攻击前需要了解的。获取的方法较多,攻击者也会因不同的网络情况采取不同的方法,如:在局域网内使用Ping指令, Ping对方在网络中的名称而获得IP;在Internet上使用IP版的QQ直接显示。最有效的办法是截获并分析对方的网络数据包。攻击者可以找到并直接通过软件解析截获后的数据包的IP 包头信息,再根据这些信息了解具体的IP。   针对最有效的“数据包分析方法”而言,就可以安装能够自动去掉发送数据包包头IP信息的一些软件。不过使用这些软件有些缺点, 譬如:耗费资源严重,降低计算机性能;访问一些论坛或者网站时会受影响;不适合网吧用户使用等等。   现在的个人用户采用最普及隐藏IP 的方法应该是使用代理,由于使用代理服务器后,“转址服务”会对发送出去的数据包有所修改,致使“数据包分析”的方法失效。一些容易泄漏用户IP 的网络软件(QQ 、MSN 、IE 等)都支持使用代理方式连接Internet ,特别是QQ 使用“ ezProxy ”等代理软件连接后, IP版的QQ都无法显示该IP地址。虽然代理可以有效地隐藏用户IP,但攻击者亦可以绕过代理, 查找到对方的真实IP地址,用户在何种情况下使用何种方法隐藏IP,也要因情况而论。   八、未加密登录请求   由于Web 配置不安全, 登陆请求把诸如用户名和密码等敏感字段未加密进行传输,攻击者可以窃听网络以劫获这些敏感信息。   九、敏感信息泄露漏洞   SQL 注入、XSS、目录遍历、弱口令等均可导致敏感信息泄露,攻击者可以通过漏洞获得敏感信息。   以上就是常见的web漏洞,web漏洞将给企业带来难以承受的影响,所以对于企业来说需要及时发现和处理web漏洞,web应用中的计算机安全漏洞的处理是很重要的。在互联网时代只要漏洞的扫描至关重要。

大客户经理 2023-09-29 11:45:00

web漏洞扫描有什么作用?漏洞扫描会影响系统性能吗

  web漏洞扫描有什么作用呢?我们经常会听到关于漏洞扫描,但是具体的功能还不清楚。漏洞扫描可能会影响系统性能,具体取决于扫描的范围、深度、频率和扫描工具的设置等因素。   web漏洞扫描有什么作用?   1、 发现潜在安全风险   Web漏洞扫描是一种自动化的方法,用于检测Web应用程序中可能存在的安全漏洞。这有助于开发人员和安全专家发现潜在的安全风险,从而可以在漏洞被黑客利用之前对其进行修复。   2、提高系统安全性   通过定期进行Web漏洞扫描,开发人员和安全专家可以评估系统的安全性,确保已经采取了适当的措施来保护敏感数据和资源。   3、遵守法规和行业标准   许多法规和行业标准要求组织定期进行Web漏洞扫描,以确保其符合特定的安全要求。通过执行这些扫描,组织可以遵守法规,并确保客户数据得到适当的保护。   4、提高客户信任   通过定期进行Web漏洞扫描并采取相应的修复措施,组织可以提高客户信任,表明他们重视客户数据的安全。   漏洞扫描会影响系统性能吗?   扫描范围和深度   漏洞扫描的范围和深度会影响系统性能的影响程度。如果扫描范围和深度过大,可能会占用系统资源,导致系统变慢或崩溃。因此,应该根据系统的特点和安全风险的变化情况来确定扫描范围和深度。   扫描频率   漏洞扫描的频率也会影响系统性能的影响程度。如果扫描频率过高,可能会占用系统资源,导致系统变慢或崩溃。因此,应该根据系统的特点和安全风险的变化情况来确定扫描频率。   扫描时间   漏洞扫描的时间也会影响系统性能的影响程度。如果扫描时间与系统的高峰期重合,可能会影响系统的性能和稳定性。因此,应该选择系统空闲期进行漏洞扫描。   扫描工具的设置   不同的漏洞扫描工具具有不同的设置选项,如扫描速度、扫描深度、线程数量等。根据系统的特点和安全风险的变化情况来确定合适的设置选项,以减少漏洞扫描对系统性能的影响。   看完文章我们就能清楚知道web漏洞扫描有什么作用?Web服务器漏洞扫描是指对Web服务器进行全面的漏洞扫描,以发现潜在的安全风险,这样对于我们来说才能及时发现漏洞进行补救。

大客户经理 2023-10-16 11:33:00

查看更多文章 >

您对快快产品月刊的整体评价是?

期待您提供更多的改进意见(选填)

提交成功~
提交失败~

售前咨询

售后咨询

  • 紧急电话:400-9188-010

等级保护报价计算器

今天已有1593位获取了等保预算

所在城市:
机房部署:
等保级别:
服务器数量:
是否已购安全产品:
手机号码:
手机验证码:
开始计算

稍后有等保顾问致电为您解读报价

拖动下列滑块完成拼图

您的等保预算报价0
  • 咨询费:
    0
  • 测评费:
    0
  • 定级费:
    0
  • 产品费:
    0
联系二维码

详情咨询等保专家

联系人:潘成豪

13055239889