Dieser Tag erlaubt eine dynamischere Beziehung zwischen eurer Website und dem Googlebot.
This allows for a more dynamic relationship between your site and Googlebot.
Abweichungen können Folge von Ressourcen sein, die für den Googlebot blockiert werden.
Differences might be the result of resources that are blocked to Googlebot.
Aus dem Statuscode bezieht Googlebot Informationen über Ihre Website und die angeforderte Seite.
This status code gives Googlebot information about your site and the requested page.
Diese Statistik zeigt Dir, wie viele Seiten der Googlebot jeden Tag crawlt.
This section shows you how many pages Googlebot crawls every day.
Sie wollen, dass der Googlebot diese Seite finden kann.
You want Googlebot to be able to find that page.
Der Googlebot kann viele verschiedene Inhaltstypen verarbeiten, aber nicht alle.
Googlebot can process many, but not all, content types.
Daher als Googlebot angezeigt, sind die zwei Unterverzeichnisse identisch.
Hence, when viewed as Googlebot, the two sub-directories are the same.
Damit der Googlebot eine Seite crawlen kann, muss er darauf zugreifen können.
To crawl a page, Googlebot must be able to access it.
Die Ressource wird durch eine robots.txt-Datei für den Googlebot blockiert.
The resource is blocked to Googlebot by a robots.txt file.
Daher war der Googlebot gezwungen, die Anfrage abzubrechen.
As a result, Googlebot was forced to abandon the request.
Dieser Code bewirkt, dass der Googlebot alle Seiten crawlen darf.
This code gives Googlebot permission to crawl all pages.
Googlebot unterstützt zum Beispiel eine erweiterte Definition des "robots.txt"-Standardprotokolls.
For instance, Googlebot supports an extended definition of the standard robots.txt protocol.
Googlebot kann zahlreiche, jedoch nicht alle Content-Typen verarbeiten.
Googlebot can process many, but not all, content types.
