+41 71 310 28 00 mail@huetzen.com
Seite auswählen

Ein Crawler, oder häufig auch Spider, Bot oder Robot, ist eine automatisierte Software, welche Webseiten und mittlerweile auch Apps im Internet auf neuen oder veränderten Inhalt prüft. Dieser Crawler surft von Website zu Website und folgt dabei jedem Link, dem er begegnet und crawlt auch dessen Inhalt. Bei diesem Prozess werden jegliche Informationen, z.B. Thema der Website, ein- und ausgehende Links, Bilder und Medien etc. indiziert und in der Datenbank hinterlegt.