Crawler

auch: Spider, Robot, Webcrawler, Webwanderer. Funktionalität einer Suchmaschinensoftware mit der Aufgabe, nach vorgegebenen Kriterien URLs im Internet aufzusuchen, Daten herunterzuladen und diese für den nächsten Bearbeitungsprozess zur Verfügung zu stellen.