freewvs.git

1) #!/usr/bin/python3 -O

2) 

3) # freewvs - a free web vulnerability scanner

4) #

5) # https://freewvs.schokokeks.org/

6) #

7) # Written by schokokeks.org Hosting, https://schokokeks.org

8) #
9) # Contributions by

10) # Hanno Boeck, https://hboeck.de/
11) # Fabian Fingerle, https://fabian-fingerle.de/
12) # Bernd Wurst, https://bwurst.org/

13) #

14) # To the extent possible under law, the author(s) have dedicated all copyright
15) # and related and neighboring rights to this software to the public domain
16) # worldwide. This software is distributed without any warranty.

17) #

18) # You should have received a copy of the CC0 Public Domain Dedication along

19) # with this software. If not, see

20) # https://creativecommons.org/publicdomain/zero/1.0/

21) # Nevertheless, in case you use a significant part of this code, we ask (but
22) # not require, see the license) that you keep the authors' names in place and
23) # return your changes to the public. We would be especially happy if you tell
24) # us what you're going to do with this code.

25) 

26) import os
27) import glob
28) import re

29) import argparse

30) import sys

31) import json

32) import pathlib

33) from xml.sax.saxutils import escape  # noqa: DUO107

34) 

35) 

36) def versioncompare(safe_version, find_version):

37)     if safe_version == "":
38)         return True

39)     safe_version_tup = [int(x) for x in safe_version.split(".")]
40)     find_version_tup = [int(x) for x in find_version.split(".")]
41)     return find_version_tup < safe_version_tup

42) 

43) 

44) def vulnprint(appname, version, safeversion, vuln, vfilename, subdir,

45)               xml):

46)     appdir = '/'.join(os.path.abspath(vfilename).split('/')[:-1 - subdir])

47)     if not xml:

48)         print("%(appname)s %(version)s (%(safeversion)s) %(vuln)s "

49)               "%(appdir)s" % vars())

50)     else:

51)         state = 'vulnerable'
52)         if safeversion == 'ok':
53)             state = 'ok'

54)         print('  <app state="%s">' % state)
55)         print('    <appname>%s</appname>' % escape(appname))
56)         print('    <version>%s</version>' % escape(version))
57)         print('    <directory>%s</directory>' % escape(appdir))

58)         if state == 'vulnerable':

59)             print('    <safeversion>%s</safeversion>' % escape(safeversion))
60)             print('    <vulninfo>%s</vulninfo>' % escape(vuln))
61)         print('  </app>')

62) 

63) 
64) # Command-line options

65) parser = argparse.ArgumentParser()
66) parser.add_argument("dirs", nargs="*",
67)                     help="Directories to scan")
68) parser.add_argument("-a", "--all", action="store_true",
69)                     help="Show all webapps found, not just vulnerable")
70) parser.add_argument("-x", "--xml", action="store_true",
71)                     help="Output results as XML")
72) parser.add_argument("-3", "--thirdparty", action="store_true",
73)                     help="Scan for third-party components like jquery")
74) opts = parser.parse_args()

75) 

76) # Warn people with old-style freewvsdb dirs,
77) # should be removed in a few months
78) for d in ["/usr/share/freewvs", "/usr/local/share/freewvs"]:
79)     if os.path.isdir(d):
80)         print("WARNING: Obsolete freewvs data in %s, removal recommended" % d,
81)               file=sys.stderr)
82) 

83) jdir = False

84) for p in [os.path.dirname(sys.argv[0]) + '/freewvsdb', '/var/lib/freewvs',
85)           str(pathlib.Path.home()) + "/.cache/freewvs/"]:

86)     if os.path.isdir(p):
87)         jdir = p

88)         break

89) if not jdir:
90)     print("Can't find freewvs json db")
91)     sys.exit(1)
92) 
93) jconfig = []
94) for cfile in glob.glob(jdir + '/*.json'):
95)     with open(cfile) as json_file:
96)         data = json.load(json_file)
97)         jconfig += data
98) 

99) scanfiles = set()

100) for app in jconfig:
101)     for det in app['detection']:
102)         scanfiles.add(det['file'])

103) 

104) 

105) if opts.xml:

106)     print('<?xml version="1.0" ?>')
107)     print('<freewvs>')

108) 
109) # start the search
110) 

111) for fdir in opts.dirs:

112)     for root, dirs, files in os.walk(fdir):
113)         # this protects us against nested directories causing
114)         # an exception
115)         if root.count(os.sep) > 500:
116)             del dirs[:]

117)         for filename in scanfiles.intersection(files):

118)             for item in jconfig:
119)                 if not opts.thirdparty and 'thirdparty' in item:
120)                     continue
121)                 for det in item['detection']:
122)                     if filename == det['file']:
123)                         mfile = os.path.join(root, filename)
124)                         try:
125)                             file = open(mfile, errors='replace')

126)                         except OSError:

127)                             continue

128)                         filestr = file.read(200000)

129)                         file.close()
130) 
131)                         if (('extra_match' in det

132)                              and det['extra_match'] not in filestr)
133)                                 or ('extra_nomatch' in det
134)                                     and det['extra_nomatch'] in filestr)):
135)                             continue
136) 
137)                         if ('path_match' in det
138)                                 and (not root.endswith(det['path_match']))):

139)                             continue
140) 
141)                         findversion = re.search(re.escape(det['variable'])
142)                                                 + r"[^0-9\n\r]*[.]*"
143)                                                 "([0-9.]*[0-9])[^0-9.]",
144)                                                 filestr)
145)                         if not findversion:
146)                             continue
147)                         findversion = findversion.group(1)
148) 
149)                         # Very ugly phpbb workaround
150)                         if 'add_minor' in det:
151)                             findversion = findversion.split('.')
152)                             findversion[-1] = str(int(findversion[-1])

153)                                                   + int(det['add_minor']))

154)                             findversion = '.'.join(findversion)
155) 

156)                         if ((not versioncompare(item['safe'], findversion))
157)                                 or ('old_safe' in item
158)                                     and findversion in
159)                                     item['old_safe'].split(','))):

160)                             if opts.all:
161)                                 vulnprint(item['name'], findversion, "ok", "",
162)                                           mfile, det['subdir'], opts.xml)
163)                             continue
164) 
165)                         safev = item['safe']
166)                         if 'old_safe' in item:
167)                             for ver in item['old_safe'].split(','):
168)                                 if versioncompare(ver, findversion):
169)                                     safev = ver
170) 
171)                         vulnprint(item['name'], findversion, safev,
172)                                   item['vuln'], mfile, det['subdir'], opts.xml)

173) 

174) if opts.xml: