ThéorieFonctionnalitésSEO

Blogger et le fichier robots.txt


Les posts publiés avant juin 2015 sont susceptibles de contenir des informations obsolètes !
Référez-vous à la nouvelle théorie du langage XML ou/et posez vos questions sur le forum pour en savoir plus.
Blogger et le fichier robots.txt
Depuis mars 2012, dans le pack SEO de Blogger, on retrouve l'option qui permet aux administrateurs de blogs, de personnaliser le fichier robots.txt.

Qu'est-ce que le fichier robots.txt ?

Un fichier robots.txt est un fichier enregistré au format texte qui indique aux robots des moteurs de recherche qui explorent le web d'accéder à votre blog.

Ces robots sont automatisés et, avant d'accéder aux pages de votre blog, ils vérifient le contenu du fichier robots.txt qui leur interdit d'accéder à certaines pages...
Ce fichier permet également d'indiquer aux moteurs, l'adresse du fichier sitemap.xml du blog.

En savoir plus dans le centre d'aide pour webmasters.


Où se trouve le fichier robots.txt de votre blog ?

Tous les blogs Blogger possèdent un fichier robots.txt qui est hébergé à la racine de votre blog à cette adresse :

http://NOM_BLOG.blogspot.com/robots.txt


Si vous n'avez rien paramétré, Blogger génère par défaut le contenu qui interdit l'accès aux robots aux pages index de votre blog afin d'éviter un duplicate content.


User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://BLOG_NAME.blogspot.com/sitemap.xml


Réglages depuis l'interface Blogger et Outils pour les webmasters

La modification de ce fichier s'effectue depuis l'interface Blogger.

  • Tableau de bord
  • Paramètres
  • Préférences de recherche
  • Robots d'exploration et indexation
  • Fichier robots.txt personnalisé

N'ignorez pas l'avertissement émit par Blogger :

Veillez à utiliser cette fonction avec prudence. Une utilisation incorrecte peut amener les moteurs de recherche à ignorer votre blog.

Donc, en résumé, si vous n'y connaissez rien, Pas touche ! ;)


Le fichier robots.txt dans l'interface Blogger


Si vous ne modifiez pas le fichier, et que vous laissez sur NON, le contenu du fichier sera généré automatiquement par Blogger (voir plus haut).

Si vous cliquez sur OUI et que vous enregistrez un document vide, vous indiquez aux moteurs de recherche qu'ils peuvent explorer et indexer toutes les pages de votre blog (déconseillé).

Si vous cliquez sur OUI et que vous souhaitez ajouter des nouvelles instructions, référez-vous aux explications fournies dans le centre d'aide pour webmasters ou / et sur robotstxt.org.


Dès que vous aurez enregistré le nouveau contenu du fichier, celui-ci sera automatiquement mis en ligne.

Sur Outils pour webmasters, le fichier s'affichera tel que vous l'avez écrit, après quelques heures de patience.

  • Outils pour webmasters
  • Exploration
  • Outil de test du fichier robots.txt


Le fichier robots.txt sur Outils pour webmasters
Dernière modification :
Assistance publique pour le produit Blogger sur les Forums d'aides :

Certifiée par Google - Experte Platine TC (Ambassador & Advanced Troubleshooter):
  • Affectation Google France, produit Blogger, du 11/07/2011 au 28/07/2014.
  • Affectation Google US, produit Blogger depuis le 28/07/2014.

Posts les plus consultés de ce blog

DéveloppementsFichiers XML
Favicons multi-sets [icon / apple-touch-icon / msapplication]
Populaire
ThéorieRéférences XMLParamètres des données
Le paramètre Image redimensionnable [isResizable]
Populaire