Das find ich ja mal nice - eMail von Google:
ZitatAlles anzeigen
Google Logo
http://***.net/: Der Googlebot hat keinen Zugriff auf Ihre Website.
In den letzten 24 Stunden hat der Googlebot 1542 Fehler beim Zugreifen auf Ihre robots.txt-Datei festgestellt. Damit keine Seiten gecrawlt werden, die in dieser Datei aufgeführt sind, wurde das Crawling verschoben. Die Gesamtfehlerquote für die robots.txt Ihrer Website liegt bei 100.0 %.
Weitere Details zu diesen Fehlern finden Sie in den Webmaster-Tools.
--------------------------------------------------------------------------------
Empfohlene Aktion
Wenn die Fehlerquote der Website 100 % beträgt:
Versuchen Sie, mit einem Webbrowser auf http://***.net/robots.txt zuzugreifen. Falls dies möglich ist, ist Ihre Website möglicherweise so konfiguriert, dass dem Googlebot der Zugriff verweigert wird. Überprüfen Sie die Konfiguration Ihrer Firewall und Ihrer Website, um sich zu vergewissern, dass dem Googlebot nicht der Zugriff verweigert wird.
Handelt es sich bei Ihrer robots.txt-Datei um eine statische Seite, überprüfen Sie, ob Ihr Webdienst die für den Zugriff auf die Datei erforderlichen Berechtigungen besitzt.
Falls Ihre robots.txt-Datei dynamisch erstellt wird, vergewissern Sie sich, dass die Skripts, die sie erstellen, ordnungsgemäß konfiguriert sind und zur Ausführung berechtigt sind. Überprüfen Sie in den Protokollen für Ihre Website, ob es bei der Ausführung Ihrer Skripts Fehler gibt. Ist dies der Fall, versuchen Sie, die Ursache der Fehler zu ermitteln.
Wenn die Fehlerquote der Website weniger als 100 % beträgt:
Suchen Sie mithilfe der Webmaster-Tools nach einem Tag mit einer hohen Fehlerquote und untersuchen Sie die Protokolle Ihres Webservers für diesen Tag. Suchen Sie in den Protokollen für diesen Tag nach Fehlern beim Zugriff auf robots.txt und beheben Sie deren Ursachen.
Am wahrscheinlichsten ist, dass Ihre Website überlastet ist. Besprechen Sie mit Ihrem Hostanbieter die Konfiguration Ihres Webservers oder die Möglichkeit, Ihrer Website mehr Ressourcen zuzuweisen.
Wenn Ihre Website zu einem anderen Hostnamen weiterleitet, kann es auch sein, dass eine URL Ihrer Website zu einem Hostnamen weiterleitet, der bei der Bereitstellung der robots.txt-Datei mindestens eines dieser Probleme aufweist.
Nachdem das Problem Ihrer Meinung nach behoben wurde, rufen Sie mithilfe von Abruf wie durch Google http://***.net/robots.txt ab, um sich zu vergewissern, dass der Googlebot ordnungsgemäß auf Ihre Website zugreifen kann.
Weitere Informationen finden Sie in der Hilfe für Webmaster.
--------------------------------------------------------------------------------
Haben Sie Feedback? Geben Sie es hier ab. Achten Sie darauf, die Nachrichten-ID anzugeben: [WMT-****].
Google Inc. 1600 Amphitheatre Parkway Mountain View, CA 94043, USA | Abbestellen
der bot kann die Seite gar nicht erreichen - weil sie down ist =)
Allerdings schon seit 48 - 72 Stunden. Scheint also nicht täglich zu crawlen =)