Detecting vulnerable web sites using web crawlers

U ovome radu opisani su osnovni principi otkrivanja ranjivih sjedišta weba pomoću web pauka. Web pauk je program ili skripta koja pronalazi podatke tako da sustavno i automatski pretražuje Internet na temelju zadanog web sjedišta iz kojeg rekurzivnim postupkom obilazi novopronađene poveznice. Kako bi se korisnika zaštitilo od zlonamjernog sadržaja na Internetu, web pauci se mogu koristiti s ciljem dojavljivanja o potencijalnoj opasnosti. Temeljem pronađenih podataka, web pauk može procijeniti stupanj ranjivosti web sjedišta i time razotkriti problematične poslužitelje.This paper describes the basic principles of detecting vulnerable web sites by using a web crawler. A web crawler is a program or script that finds data by systematically browsing the Internet based on a given web site from which it recursively crawls newly found links. To protect the user from malicious content on the Internet, web crawlers can be used to report potential danger. Based on the data found, the web crawler can estimate the degree of vulnerability of the web site and therefore expose the problematic servers