SEO FAQ - Was ist ein Spider ?
Ein Crawler bzw. ein Spider ist ein Suchmaschinenprogramm der das Internet abklappert,
nach neuen Seiten sucht und diese Indiziert. Links werden ausgelesen und zu einem
späteren Zeitpunkt besucht. So wird nach und nach die Gesamte Webpräsenz abgesucht.
SEO - Faq Übersicht