漏洞信息获取

最近斗哥在逛某论坛的时候，看到有人提出一个问题：“如何快速获取第一手漏洞信息，可否介绍一些第一手漏洞信息的获取渠道？”so...雷厉风行的斗哥这就为大家带来了介绍。

漏洞信息的获取渠道

1.网站 https://seclists.org/fulldisclosure/

任何黑客都会告诉你，在任何网站上都找不到最新的新闻和漏洞，甚至没有。而在这里，一个公共的，与供应商无关的论坛，最新的漏洞有时会在Bugtraq审核通过之前数小时或数天出现在此列表中。

2.网站 https://www.exploit-db.com/

Exploit-DB是一个CVE兼容的公共漏洞和相应易受攻击软件的存档，开发供渗透测试人员和漏洞研究人员使用。目标是通过直接提交，邮件列表以及其他公共资源提供最全面的漏洞利用集合，并将其呈现在一个免费且易于导航的数据库中。漏洞利用数据库是漏洞利用和概念验证的存储库，而不是建议，使其成为那些需要立即采取可操作数据的人的宝贵资源。

3.网站 https://www.openssl.org/news/vulnerabilities.html

Struts2是apache项目下的一个web 框架，普遍应用于阿里巴巴、京东等互联网、政府、企业门户网站。在过去的几年内，几乎每年Struts2都会爆出存在严重安全漏洞，苹果、中国移动、中国联通、百度、腾讯、淘宝、京东、Sohu、民生银行等大型企业的网站均遭毒手，运维工程师苦不堪言。故该框架的官方安全公告也是斗哥关注的一个对象。

4.网站 https://www.openssl.org/news/vulnerabilities.html

OpenSSL是为网络通信提供安全及数据完整性的一种安全协议，囊括了主要的密码算法、常用的密钥和证书封装管理功能以及SSL协议，目前正在各大网银、在线支付、电商网站、门户网站、电子邮件等重要网站上广泛使用，使用了存在漏洞的OpenSSL版本，用户登录该网站时就可能被黑客实时监控到登录账号和密码等敏感的信息。所以该协议漏洞应该特别值得关注。

自动化漏洞信息采集

1. 漏洞信息采集

接下来，我们可以写一段python代码，对上述四个网站进行漏洞信息的采集：

对Seclists网站的采集代码如下：

# 获取seclists完全漏洞列表

def seclists(time):

result = []

time = time.split("-")

# 漏洞列表网址 [url]https://seclists.org/fulldisclosure/2018/Jan/date.html[/url]

url = 'https://seclists.org/fulldisclosure/%s/%s/date.html' % (time[0], time[1])

# 获取GET响应html

html = get(url).text

try:

vulnerablelist =

re.findall('<h4>%s, %s %s</h4> <blockquote>(.*?)</blockquote>' % (time[4], time[3], time[2]), html, re.S)[

0].split(' ')

except IndexError:

vulnerablelist = []

for vulnerable in vulnerablelist:

vulnerabledict = {}

if vulnerable == "":

continue

vulnerable_href = re.findall('href="(.*?)"', vulnerable, re.S)[0]

vulnerabledict["name"] = re.findall('">(.*?)</a>', vulnerable, re.S)[0]

# 漏洞详情页面网址 [url]https://seclists.org/fulldisclosure/2018/Nov/0[/url]

vulnerabledict["url"] = "https://seclists.org/fulldisclosure/%s/%s/%s" % (time[0], time[1], vulnerable_href)

result.append(vulnerabledict)

return result

对Exploit-DB网站的采集代码如下：

# 获取exploit_db漏洞列表

def exploit_db(time):

result = []

my_headers = [

"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.75 Safari/537.36"]

random_header = random.choice(my_headers)

req = urllib2.Request(url)

req.add_header("User-Agent", random_header)

req.add_header("GET", url)

req.add_header("Host", "www.exploit-db.com")

req.add_header("Referer", "https://www.exploit-db.com/")

req.add_header("X-Requested-With", "XMLHttpRequest")

对Struts 2安全公告的采集代码如下：

# 获取Struts 2安全公告

def struts(time):

result = []

time = time.split("-")

# time = 14 November 2018

# 漏洞公告网址 [url]https://struts.apache.org/announce.html[/url]

url = 'https://struts.apache.org/announce.html'

# 获取GET响应html

html = get(url).text

vulnerablelist = re.findall('<ul id="markdown-toc"> (.*?) </ul>', html, re.S)[0].split(' ')

for vulnerable in vulnerablelist:

vulnerabledict = {}

vulnerable_name = re.findall('">(.*?)</a></li>', vulnerable, re.S)[0]

if "%s %s %s" % (time[3], time[2], time[0]) in vulnerable_name:

vulnerable_href = re.findall('href="(.*?)"', vulnerable, re.S)[0]

vulnerabledict["name"] = vulnerable_name

vulnerabledict["url"] = url + vulnerable_href

result.append(vulnerabledict)

else:

break

return result

对Openssl安全公告的采集代码如下：

# 获取Openssl安全公告

def openssl(time):

result = []

time = time.replace("-", "")

# 漏洞公告网址 [url]https://www.openssl.org/news/vulnerabilities.html#[/url]

url = 'https://www.openssl.org/news/vulnerabilities.html'

# 获取GET响应html

html = get(url).text

bs = BeautifulSoup(html, "lxml")

vulnerablelist = bs.find_all('dt')

for vulnerable in vulnerablelist:

vulnerabledict = {}

vulnerable = str(vulnerable)

try:

vulnerable_time = re.findall('<a href="/news/secadv/(.*?).txt">', vulnerable, re.S)[0]

if vulnerable_time == time:

vulnerabledict["name"] =

re.findall('">(.*?)</a> <a href="/news/secadv/%s.txt">' % vulnerable_time, vulnerable, re.S)[0]

vulnerabledict["url"] = re.findall('<dt><a href="(.*?)" name="', vulnerable, re.S)[0]

result.append(vulnerabledict)

else:

break

except IndexError:

continue

return result

将上述采集到的信息结果记录到文件，poython代码如下：

001

002

003

004

005

006

007

008

009

010

011

012

013

014

015

016

017

018

019

020

021

022

023

024

025

026

027

028

029

030

031

032

033

034

035

036

037

038

039

040

041

042

043

044

045

046

047

048

049

050

051

052

053

054

055

056

057

058

059

060

061

062

063

064

065

066

067

068

069

070

071

072

073

074

075

076

077

078

079

080

081

082

083

084

085

086

087

088

089

090

091

092

093

094

095

096

097

098

099

100

101

# 获取漏洞信息并写入文件

def get_information(t):

# 格式化时间

time = t.strftime('%Y-%m-%d') # time = "2018-11-26"

TIME = t.strftime('%Y-%b-%B-%d-%A') # TIME = "2018-Nov-November-26-Tuesday"

# 创建结果文件

f = open('%s.txt' % time, 'a+') # 若是'wb'就表示写二进制文件