Webmaster-Zentrale Blog
Offizielle Informationen zum Crawling und zur Indexierung von Webseiten und News für Webmaster
Neue Benachrichtigungen über Crawling-Fehler von Webmaster-Tools
Mittwoch, 8. August 2012
Ab heute erhaltet ihr Benachrichtigungen über Crawling-Fehler, damit ihr stets über den Status eurer Website informiert seid.
Da eure Website regelmäßig vom Googlebot besucht wird, erfahren wir, wenn auf eurer Website Verbindungsprobleme auftreten oder Seiten plötzlich HTTP-Fehler wie etwa 404 – Datei nicht gefunden, 403 – Unzulässig oder 503 – Dienst nicht verfügbar, zurückgeben. Wenn auf eurer Website Zeitüberschreitungen oder Systemfehler während des Zugriffs durch den Googlebot auftreten, könnten andere Besucher eurer Website das gleiche Problem haben.
Sobald wir solche Fehler feststellen, senden wir gegebenenfalls entsprechende Benachrichtigungen in Form von Meldungen im
Nachrichten-Center
in Webmaster-Tools. So habt ihr die Möglichkeit, die potenziellen Probleme zu beheben, die ansonsten möglicherweise die Besucher eurer Website oder die Präsenz eurer Website in der Suche beeinträchtigen würden.
Wie in unserem
Blogpost
zur neuen
Crawling-Fehler-Funktion
in Webmaster-Tools erläutert, werden Crawling-Fehler in zwei Typen unterteilt: Website-Fehler und URL-Fehler.
Benachrichtigungen über schwerwiegende Probleme, die die gesamte Website betreffen
Website-Fehler verhindern den Zugriff auf eure Website und deuten eher auf Systemprobleme als auf Probleme mit einzelnen Seiten hin. Website-Fehler können beispielsweise durch folgende Situationen entstehen:
Euer DNS-Server ist ausgefallen oder falsch konfiguriert.
Euer Webserver selbst wird durch die Firewall abgeschottet.
Euer Webserver weist Verbindungsanfragen vom Googlebot zurück.
Euer Webserver ist überlastet oder ausgefallen.
Auf die robots.txt eurer Website kann nicht zugegriffen werden.
Diese Fehler betreffen die komplette Website. Theoretisch dürften sie bei einer gut funktionierenden Website nie vorkommen und bei den allermeisten von uns gecrawlten Websites treten sie auch nicht auf. Wenn der Googlebot eine beträchtliche Anzahl dieser Website-Fehler findet, informieren wir euch unabhängig von der Größe eurer Website in Form einer Nachricht im
Nachrichten-Center
:
Beispiel einer Benachrichtigung über einen Website-Fehler
Die Benachrichtigung enthält neben der Anzahl der Fehler, die der Googlebot beim Crawlen eurer Website festgestellt hat, auch die Gesamtrate der Crawling-Fehler für eure Website, einen Link zum entsprechenden Abschnitt in Webmaster-Tools, wo ihr euch die Daten genauer ansehen könnt, sowie Vorschläge zur Behebung des Problems.
Sollte eure Website in einer dieser Kategorien eine Fehlerrate von 100 % aufweisen, ist eure Website wahrscheinlich ausgefallen oder auf irgendeine Weise falsch konfiguriert. Liegt die Fehlerrate in einer dieser Kategorien unter 100 %, könnte dies lediglich auf eine vorübergehende Situation hinweisen. Es könnte jedoch auch bedeuten, dass eure Website überlastet oder fehlerhaft konfiguriert ist. Es empfiehlt sich, diesen Problemen nachzugehen oder eine entsprechende Frage in unserem
Forum
zu stellen.
Unter Umständen benachrichtigen wir euch auch, wenn die Gesamtfehlerrate sehr gering ist. Nach unseren Erfahrungen sollten bei einer gut funktionierende Website keine Fehler in diesen Kategorien auftreten.
Benachrichtigungen über eine Zunahme von potenziell weniger kritischen URL-Fehlern
Während eine beträchtliche Anzahl von Website-Fehlern darauf hinweisen könnte, dass eure Website falsch konfiguriert, überlastet oder einfach nicht erreichbar ist, können URL-Fehler (Seiten, die einen Nicht-200-HTTP-Code oder im Fall von Soft 404-Fehlern einen HTTP-200-Code falsch zurückgeben) auf jeder korrekt konfigurierten Website auftreten. Da verschiedene Websites eine unterschiedliche Anzahl von Seiten oder externen Links aufweisen, kann eine bestimmte Fehleranzahl bei einer kleinen Website auf ein schwerwiegendes Problem hindeuten, bei einer großen Website jedoch völlig normal sein.
Aus diesem Grund senden wir bei URL-Fehlern nur Benachrichtigungen, wenn wir eine deutliche Zunahme von Fehlern in einer der fünf Fehlerkategorien (Serverfehler, Soft 404, Zugriff verweigert, Nicht gefunden oder Nicht gefolgt) feststellen. Wenn eure Website beispielsweise routinemäßig 100 Seiten mit 404-Fehlern aufweist, benachrichtigen wir euch bei leichten Abweichungen von dieser Zahl nicht. Unter Umständen benachrichtigen wir euch jedoch, wenn sich die Zahl deutlich erhöht, zum Beispiel auf 500 oder 1000. 404-Fehler sind nicht unbedingt negativ, sie können ein natürlicher Bestandteil einer intakten Website sein (siehe früherer Blogpost:
Schaden 404-Fehler meiner Website?
).
Ein deutlicher Anstieg der Fehleranzahl kann darauf hindeuten, dass sich etwas auf eurer Website geändert hat. So könnten sich durch eine Neukonfiguration die Berechtigungen für einen Abschnitt eurer Website geändert haben oder eine neue Version eines Skripts stürzt regelmäßig ab oder jemand hat aus Versehen ein ganzes Verzeichnis verschoben oder gelöscht oder eine Umstrukturierung eurer Website hat dazu geführt, dass externe Links nicht mehr funktionieren. Es könnte sich auch nur um eine vorübergehende Schwankung handeln oder die Änderung könnte externe Ursachen haben (jemand hat einen Link auf nicht vorhandene Seiten eingefügt), sodass gar kein echtes Problem vorliegt. Wenn wir jedoch eine ungewöhnlich hohe Fehlerzahl bei eurer Website feststellen, benachrichtigen wir euch, damit ihr entsprechende Nachforschungen anstellen könnt:
Beispiel einer Benachrichtigung über eine Zunahme von URL-Fehlern
Die Benachrichtigung enthält eine Beschreibung der Kategorie von Webfehlern, für die wir einen Anstieg festgestellt haben, einen Link zum entsprechenden Abschnitt der Webmaster-Tools, wo ihr sehen könnt, welche Seiten unserer Ansicht nach problematisch sind, sowie Vorschläge zur Fehlerbehebung.
Weiterleitung von Benachrichtigungen an euren Posteingang
Wir wissen, dass ihr viel zu tun und möglicherweise keine Zeit habt, regelmäßig in den
Webmaster-Tools
zu prüfen, ob neue Benachrichtigungen eingegangen sind. Daher ist es empfehlenswert, die
Nachrichtenweiterleitung
zu aktivieren. Wir senden alle Webmaster-Tools-Nachrichten an die E-Mail-Adresse eurer Wahl.
Wir würden uns über Feedback von euch freuen. Wenn ihr Kommentare oder Vorschläge zu unseren neuen Benachrichtigungen habt, postet sie bitte in unserem
Forum
.
Autor:
Brian Malcolm
, Webmaster-Tools-Team. Veröffentlicht von
Uli Lutz
, Search Quality
Labels
#NoHacked
2
2017
1
Accessibility
13
AJAX
1
AMP
7
Android
2
api
1
App-Indexierung
3
Best Practices
99
Bildersuche
2
captcha
1
Chrome
4
Code
12
Crawling
1
Crawling und Indexierung
126
Diskussionsforum
15
Duplicate Content
17
Dynamic Rendering
1
Einsteiger
8
Event
1
events
1
Feedback
1
Geo-Targeting
11
Google Analytics
6
Google Dance
1
Google News
1
Google Places
4
Google-Assistant
1
Google-Suche
59
Google+
9
Hacking
16
Hangouts
1
https
3
JavaScript
3
Kanonische URL
1
Kommentare
1
Konferenz
19
Lighthouse
3
Links
18
Malware
17
Mobile
38
Mobile-first indexing
1
Nachrichten-Center
16
Optimisation
3
PageSpeed Insights
2
Penalties
1
Performance
3
Ranking
1
reCaptcha v3
1
Rendering
2
Rich Snippets
18
Richtlinien für Webmaster
36
robots.txt
7
Safe Browsing
5
Search Console
19
Search Results
1
Security
4
Seitenzugriff
1
SEO
4
Sicherheit
38
Site Clinic
5
Sitemaps
30
Spam Report
9
SSL
1
Structured Data
8
Tools und Gadgets
17
Verschlüsselung
1
Video
132
Webmaster blog
1
Webmaster Community
1
Webmaster-Academy
1
Webmaster-Tools
154
webspam
3
Archiv
2020
Nov.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
2019
Dez.
Nov.
Okt.
Sept.
Juni
Mai
Feb.
Jan.
2018
Dez.
Nov.
Okt.
Sept.
Juli
Juni
Mai
Apr.
Feb.
Jan.
2017
Dez.
Nov.
Juni
Apr.
März
Jan.
2016
Nov.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Jan.
2015
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Mai
Apr.
März
Feb.
Jan.
2014
Nov.
Okt.
Sept.
Aug.
Juni
Mai
Apr.
März
Feb.
Jan.
2013
Dez.
Nov.
Okt.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2012
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2011
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2010
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2009
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2008
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feb.
Jan.
2007
Dez.
Nov.
Okt.
Sept.
Aug.
Juli
Juni
Mai
Apr.
März
Feed
Forum für Webmaster
Webmaster-Sprechstunden
Webmaster-Tools-Hilfe
Developers-Site für Webmaster