Ce code donne l'autorisation au Googlebot d'explorer toutes les pages.
Dieser Code bewirkt, dass der Googlebot alle Seiten crawlen darf.
Pour explorer une page, Googlebot doit pouvoir y accéder.
Damit der Googlebot eine Seite crawlen kann, muss er darauf zugreifen können.
Par conséquent, Googlebot a été forcé d'abandonner la requête.
Googlebot doit être traité comme n'importe quel autre navigateur.
Googlebot doit avoir accès à tous les fichiers.
Googlebot utilise ce signal pour l'exploration.
Der Googlebot verwendet dieses Signal zum Crawlen.
Cela permet à Googlebot de découvrir l'emplacement des pages mobiles de votre site.
Il donne au robot Googlebot des informations sur votre site et sur la page demandée.
Aus dem Statuscode bezieht Googlebot Informationen über Ihre Website und die angeforderte Seite.
En général, Googlebot télécharge une seule copie de chaque page à la fois.
Im Allgemeinen sollte der Googlebot jeweils nur ein Exemplar der einzelnen Seiten herunterladen.
Googlebot analysera votre site pour déterminer comment gérer au mieux ce paramètre.
Der Googlebot analysiert dann Ihre Website und bestimmt die beste Vorgehensweise für den Parameter.
Pour empêcher Googlebot d'explorer votre page, créez un fichier robots.txt.
Par exemple, Googlebot est compatible avec la définition étendue du protocole robots.txt standard.
Googlebot unterstützt zum Beispiel eine erweiterte Definition des "robots.txt"-Standardprotokolls.
Ainsi, le Googlebot peut fournir des résultats de recherche approprié à chaque groupe cible.
So kann der Googlebot jeder Zielgruppe passende Suchergebnisse ausliefern.