Crawler
Zur Navigation springen
Zur Suche springen
Der Begriff meint eine Software, die von Suchmaschinen im Internet zum Einsatz kommt, um alle Webseiten zu finden, zu katalogisieren und über die Suchfunktion der Suchmaschine zugänglich zu machen.