SEO
Crawling.
Crawling bedeutet, dass ein automatisiertes Programm Webseiten und andere Ressourcen abruft. Suchmaschinen entdecken dabei Inhalte und Links. Ein erfolgreicher Abruf heißt noch nicht, dass die Seite in den Suchindex aufgenommen oder für eine Suche angezeigt wird.
Warum ist das wichtig?
Eine Suchmaschine kann eine neue Erklärung nur beurteilen, wenn sie davon erfährt und sie erreichen kann. Fehlerhafte Links oder ungewollte Sperren können diesen Weg unterbrechen.
Ein Beispiel
Eine neue Glossarseite ist über die Übersicht verlinkt und in der Sitemap enthalten. Google kann dadurch auf ihre URL aufmerksam werden und sie abrufen. Erst anschließend wird entschieden, ob die Seite indexiert wird und für welche Suchanfragen sie relevant erscheint.
Worauf kommt es an?
Prüfen Sie Erreichbarkeit, interne Links und robots.txt. In der Search Console lässt sich untersuchen, ob eine URL abgerufen wurde. Auch eine technisch erreichbare Seite wird nicht zwingend sofort oder regelmäßig gecrawlt.
Typische Fehler
- Crawling mit Indexierung oder einer guten Suchposition gleichsetzen.
- Wichtige Seiten nur über ein Suchfeld erreichbar machen, das keine normalen Links ausgibt.
Weiterlesen
Passende Leistung: Technisches SEO für WordPress