web site örümcekleri

Web site örümcekleri (site spiders); arama motorlarının (Google, Yandex, MSN gibi) internete saldıkları , bir bağlantıdan diğer bağlantıya atlayarak siteden