freewvs.git

1) #!/usr/bin/python3 -O

2) 

3) # freewvs - a free web vulnerability scanner

4) #

5) # https://freewvs.schokokeks.org/

6) #

7) # Written by schokokeks.org Hosting, https://schokokeks.org

8) #
9) # Contributions by

10) # Hanno Boeck, https://hboeck.de/
11) # Fabian Fingerle, https://fabian-fingerle.de/
12) # Bernd Wurst, https://bwurst.org/

13) #

14) # To the extent possible under law, the author(s) have dedicated all copyright
15) # and related and neighboring rights to this software to the public domain
16) # worldwide. This software is distributed without any warranty.

17) #

18) # You should have received a copy of the CC0 Public Domain Dedication along

19) # with this software. If not, see

20) # https://creativecommons.org/publicdomain/zero/1.0/

21) # Nevertheless, in case you use a significant part of this code, we ask (but
22) # not require, see the license) that you keep the authors' names in place and
23) # return your changes to the public. We would be especially happy if you tell
24) # us what you're going to do with this code.

25) 

26) import os
27) import glob
28) import re

29) import argparse

30) import sys

31) import json

32) import pathlib

33) from xml.sax.saxutils import escape  # noqa: DUO107

34) 

35) 

36) def versioncompare(safe_version, find_version):

37)     if safe_version == "":
38)         return True

39)     safe_version_tup = [int(x) for x in safe_version.split(".")]
40)     find_version_tup = [int(x) for x in find_version.split(".")]
41)     return find_version_tup < safe_version_tup

42) 

43) 

44) def checkoldsafe(old_safe, find_version):
45)     find_version_tup = [int(x) for x in find_version.split(".")]
46)     for oldver in old_safe.split(","):
47)         oldver_tup = [int(x) for x in oldver.split(".")]
48) 
49)         if find_version_tup == oldver_tup:
50)             return True
51)         # handle special case where minor version is larger
52)         if (
53)             len(find_version_tup) >= 2
54)             and find_version_tup[:-1] == oldver_tup[:-1]
55)             and find_version_tup[-1] > oldver_tup[-1]
56)         ):
57)             return True
58)     return False
59) 
60) 

61) def vulnprint(appname, version, safeversion, vuln, vfilename, subdir,

62)               xml):

63)     appdir = '/'.join(os.path.abspath(vfilename).split('/')[:-1 - subdir])

64)     if not xml:

65)         print(f"{appname} {version} ({safeversion}) {vuln} {appdir}")

66)     else:

67)         state = 'vulnerable'
68)         if safeversion == 'ok':
69)             state = 'ok'

70)         print(f'  <app state="{state}">')
71)         print(f'    <appname>{escape(appname)}</appname>')
72)         print(f'    <version>{escape(version)}</version>')
73)         print(f'    <directory>{escape(appdir)}</directory>')

74)         if state == 'vulnerable':

75)             print(f'    <safeversion>{escape(safeversion)}</safeversion>')
76)             print(f'    <vulninfo>{escape(vuln)}</vulninfo>')

77)         print('  </app>')

78) 

79) 
80) # Command-line options

81) parser = argparse.ArgumentParser()
82) parser.add_argument("dirs", nargs="*",
83)                     help="Directories to scan")
84) parser.add_argument("-a", "--all", action="store_true",
85)                     help="Show all webapps found, not just vulnerable")
86) parser.add_argument("-x", "--xml", action="store_true",
87)                     help="Output results as XML")
88) parser.add_argument("-3", "--thirdparty", action="store_true",
89)                     help="Scan for third-party components like jquery")
90) opts = parser.parse_args()

91) 

92) jdir = False

93) for p in [os.path.dirname(sys.argv[0]) + '/freewvsdb', '/var/lib/freewvs',
94)           str(pathlib.Path.home()) + "/.cache/freewvs/"]:

95)     if os.path.isdir(p):
96)         jdir = p

97)         break

98) if not jdir:
99)     print("Can't find freewvs json db")
100)     sys.exit(1)
101) 
102) jconfig = []
103) for cfile in glob.glob(jdir + '/*.json'):

104)     with open(cfile, encoding="ascii") as json_file:

105)         data = json.load(json_file)
106)         jconfig += data
107) 

108) scanfiles = set()

109) for app in jconfig:
110)     for det in app['detection']:
111)         scanfiles.add(det['file'])

112) 

113) 

114) if opts.xml:

115)     print('<?xml version="1.0" ?>')
116)     print('<freewvs>')

117) 
118) # start the search
119) 

120) for fdir in opts.dirs:

121)     for root, dirs, files in os.walk(fdir):
122)         # this protects us against nested directories causing
123)         # an exception
124)         if root.count(os.sep) > 500:
125)             del dirs[:]

126)         for filename in scanfiles.intersection(files):

127)             for item in jconfig:
128)                 if not opts.thirdparty and 'thirdparty' in item:
129)                     continue
130)                 for det in item['detection']:
131)                     if filename == det['file']:
132)                         mfile = os.path.join(root, filename)
133)                         try:

134)                             file = open(mfile, encoding='ascii',
135)                                         errors='replace')

136)                         except OSError:

137)                             continue

138)                         filestr = file.read(200000)

139)                         file.close()
140) 
141)                         if (('extra_match' in det

142)                              and det['extra_match'] not in filestr)
143)                                 or ('extra_nomatch' in det
144)                                     and det['extra_nomatch'] in filestr)):
145)                             continue
146) 
147)                         if ('path_match' in det
148)                                 and (not root.endswith(det['path_match']))):

149)                             continue
150) 
151)                         findversion = re.search(re.escape(det['variable'])
152)                                                 + r"[^0-9\n\r]*[.]*"
153)                                                 "([0-9.]*[0-9])[^0-9.]",
154)                                                 filestr)
155)                         if not findversion:
156)                             continue
157)                         findversion = findversion.group(1)
158) 
159)                         # Very ugly phpbb workaround
160)                         if 'add_minor' in det:
161)                             findversion = findversion.split('.')
162)                             findversion[-1] = str(int(findversion[-1])

163)                                                   + int(det['add_minor']))

164)                             findversion = '.'.join(findversion)
165) 

166)                         if (not versioncompare(item['safe'], findversion)

167)                                 or ('old_safe' in item

168)                                     and checkoldsafe(item['old_safe'],
169)                                                      findversion))):

170)                             if opts.all:
171)                                 vulnprint(item['name'], findversion, "ok", "",
172)                                           mfile, det['subdir'], opts.xml)
173)                             continue
174) 
175)                         safev = item['safe']
176)                         if 'old_safe' in item:
177)                             for ver in item['old_safe'].split(','):
178)                                 if versioncompare(ver, findversion):
179)                                     safev = ver
180) 
181)                         vulnprint(item['name'], findversion, safev,
182)                                   item['vuln'], mfile, det['subdir'], opts.xml)

183) 

184) if opts.xml: