freewvs.git

1) #!/usr/bin/python3 -O

2) 

3) # freewvs - a free web vulnerability scanner

4) #

5) # https://freewvs.schokokeks.org/

6) #

7) # Written by schokokeks.org Hosting, https://schokokeks.org

8) #
9) # Contributions by

10) # Hanno Boeck, https://hboeck.de/
11) # Fabian Fingerle, https://fabian-fingerle.de/
12) # Bernd Wurst, https://bwurst.org/

13) #

14) # To the extent possible under law, the author(s) have dedicated all copyright
15) # and related and neighboring rights to this software to the public domain
16) # worldwide. This software is distributed without any warranty.

17) #

18) # You should have received a copy of the CC0 Public Domain Dedication along

19) # with this software. If not, see

20) # https://creativecommons.org/publicdomain/zero/1.0/

21) # Nevertheless, in case you use a significant part of this code, we ask (but
22) # not require, see the license) that you keep the authors' names in place and
23) # return your changes to the public. We would be especially happy if you tell
24) # us what you're going to do with this code.

25) 

26) import os
27) import glob
28) import re

29) import argparse

30) import sys

31) import json

32) import pathlib

33) from xml.sax.saxutils import escape  # noqa: DUO107

34) 

35) 

36) def versioncompare(safe_version, find_version):

37)     if safe_version == "":
38)         return True

39)     safe_version_tup = [int(x) for x in safe_version.split(".")]
40)     find_version_tup = [int(x) for x in find_version.split(".")]
41)     return find_version_tup < safe_version_tup

42) 

43) 

44) def vulnprint(appname, version, safeversion, vuln, vfilename, subdir,

45)               xml):

46)     appdir = '/'.join(os.path.abspath(vfilename).split('/')[:-1 - subdir])

47)     if not xml:

48)         print(f"{appname} {version} ({safeversion}) {vuln} {appdir}")

49)     else:

50)         state = 'vulnerable'
51)         if safeversion == 'ok':
52)             state = 'ok'

53)         print(f'  <app state="{state}">')
54)         print(f'    <appname>{escape(appname)}</appname>')
55)         print(f'    <version>{escape(version)}</version>')
56)         print(f'    <directory>{escape(appdir)}</directory>')

57)         if state == 'vulnerable':

58)             print(f'    <safeversion>{escape(safeversion)}</safeversion>')
59)             print(f'    <vulninfo>{escape(vuln)}</vulninfo>')

60)         print('  </app>')

61) 

62) 
63) # Command-line options

64) parser = argparse.ArgumentParser()
65) parser.add_argument("dirs", nargs="*",
66)                     help="Directories to scan")
67) parser.add_argument("-a", "--all", action="store_true",
68)                     help="Show all webapps found, not just vulnerable")
69) parser.add_argument("-x", "--xml", action="store_true",
70)                     help="Output results as XML")
71) parser.add_argument("-3", "--thirdparty", action="store_true",
72)                     help="Scan for third-party components like jquery")
73) opts = parser.parse_args()

74) 

75) jdir = False

76) for p in [os.path.dirname(sys.argv[0]) + '/freewvsdb', '/var/lib/freewvs',
77)           str(pathlib.Path.home()) + "/.cache/freewvs/"]:

78)     if os.path.isdir(p):
79)         jdir = p

80)         break

81) if not jdir:
82)     print("Can't find freewvs json db")
83)     sys.exit(1)
84) 
85) jconfig = []
86) for cfile in glob.glob(jdir + '/*.json'):

87)     with open(cfile, encoding="ascii") as json_file:

88)         data = json.load(json_file)
89)         jconfig += data
90) 

91) scanfiles = set()

92) for app in jconfig:
93)     for det in app['detection']:
94)         scanfiles.add(det['file'])

95) 

96) 

97) if opts.xml:

98)     print('<?xml version="1.0" ?>')
99)     print('<freewvs>')

100) 
101) # start the search
102) 

103) for fdir in opts.dirs:

104)     for root, dirs, files in os.walk(fdir):
105)         # this protects us against nested directories causing
106)         # an exception
107)         if root.count(os.sep) > 500:
108)             del dirs[:]

109)         for filename in scanfiles.intersection(files):

110)             for item in jconfig:
111)                 if not opts.thirdparty and 'thirdparty' in item:
112)                     continue
113)                 for det in item['detection']:
114)                     if filename == det['file']:
115)                         mfile = os.path.join(root, filename)
116)                         try:

117)                             file = open(mfile, encoding='ascii',
118)                                         errors='replace')

119)                         except OSError:

120)                             continue

121)                         filestr = file.read(200000)

122)                         file.close()
123) 
124)                         if (('extra_match' in det

125)                              and det['extra_match'] not in filestr)
126)                                 or ('extra_nomatch' in det
127)                                     and det['extra_nomatch'] in filestr)):
128)                             continue
129) 
130)                         if ('path_match' in det
131)                                 and (not root.endswith(det['path_match']))):

132)                             continue
133) 
134)                         findversion = re.search(re.escape(det['variable'])
135)                                                 + r"[^0-9\n\r]*[.]*"
136)                                                 "([0-9.]*[0-9])[^0-9.]",
137)                                                 filestr)
138)                         if not findversion:
139)                             continue
140)                         findversion = findversion.group(1)
141) 
142)                         # Very ugly phpbb workaround
143)                         if 'add_minor' in det:
144)                             findversion = findversion.split('.')
145)                             findversion[-1] = str(int(findversion[-1])

146)                                                   + int(det['add_minor']))

147)                             findversion = '.'.join(findversion)
148) 

149)                         if (not versioncompare(item['safe'], findversion)

150)                                 or ('old_safe' in item
151)                                     and findversion in
152)                                     item['old_safe'].split(','))):

153)                             if opts.all:
154)                                 vulnprint(item['name'], findversion, "ok", "",
155)                                           mfile, det['subdir'], opts.xml)
156)                             continue
157) 
158)                         safev = item['safe']
159)                         if 'old_safe' in item:
160)                             for ver in item['old_safe'].split(','):
161)                                 if versioncompare(ver, findversion):
162)                                     safev = ver
163) 
164)                         vulnprint(item['name'], findversion, safev,
165)                                   item['vuln'], mfile, det['subdir'], opts.xml)

166) 

167) if opts.xml: