Utiliser 2 sitemap pour le fichier robots.txt de votre blogger

De nombreux utilisateurs de Blogger ont défini dans leur fichier robots.txt le sitemap de Atom. Cependant, ce dernier est parfois mal interprété par certains moteurs de recherche; je pense notamment à Microsoft Bing (voir article), il est donc nécessaire de spécifier un second sitemap dans votre fichier robots.txt. En effet, même si vous n'êtes pas utilisateur de la Google Search Console ou des Microsoft Bing Webmaster Tools, il est utile de déclarer dans le fichier robots.txt où se trouvent votre ou vos sitemap. En effet, ceci simplifie le travail des robots d'exploration des moteurs de recherche et augmente grandement les chances de voir l'ensemble de vos pages être indexé par ces derniers.

Dans le cas de Blogger et afin de maximiser vos chances d'être mieux référencé dans Bing comme dans Google, déclarer 2 sitemap dans votre fichier robots.txt peut être une bonne solution. Tout d'abord, sachez que par défaut le sitemap déclaré dans le robots.txt de Blogger est bien souvent celui de Atom. Il existe cependant d'office un second sitemap de votre site à l'adresse https://monsite.blogspot.com/sitemap.xml (bien sûr n'oubliez pas de remplacer "monsite" par votre nom de domaine). Ce dernier est parfaitement lisible par tous les moteurs de recherche, il est donc judicieux de le rajouter à votre fichier robots.txt.

Pour ce faire, dans votre backoffice Blogger, cliquez sur Paramètres dans la colonne de gauche. Scrollez jusqu'à la partie Robots d'exploration et indexation. A cette étape, veillez à copier le contenu actuel de votre robots.txt, vous le trouverez à l'adresse https://monsite.blogspot.com/robots.txt puis activez le fichier robots.txt personnalisé et dans le cadre sous Fichier robots.txt personnalisé collez le contenu de votre fichier robots.txt et ajoutez :

• Sitemap: https://journal-web-entrepreneur.blogspot.com/atom.xml (s'il n'est pas déjà spécifié)
• Sitemap: https://journal-web-entrepreneur.blogspot.com/sitemap.xml

Enregistrez et voilà ! Vous êtes désormais prêt à être plus facilement crawlé par la majorité des moteurs de recherche et notamment Bing.

Accélérer l'indexation de vos pages sous la nouvelle Search Console Google

Depuis quelques mois, Google migre progressivement ses outils de référencement de l'ancienne vers la nouvelle Search Console. Ainsi, après les rapports statistiques de performance de votre site, c'est au tour de son service d'indexation des pages d'être annoncé comme indisponible sur l'ancienne version de la Google Search Console à partir du 28 mars. Pour rappel, comme nous l'avons vu lors de l'article Le réflexe de base pour améliorer votre indexation dans Google, soumettre vos pages nouvellement créées à Google, via sa Search Console, vous permet d'en améliorer sa visibilité. Pas de panique, cette possibilité est désormais disponible sur la nouvelle Google Search Console... voici comment procéder...

Partons d'un exemple concret, je viens de créer une nouvelle page sur mon site de vente de bières en ligne Beer Route. Je me connecte à la nouvelle Google Search Console et sur le menu de gauche je choisis Inspection d'URL. Il vous ai alors demandé en haut de spécifier l'URL de la page que vous désirez faire inspecter par les robots Google. Rentrez alors l'URL de votre nouvelle page, validez. Google vous fournit désormais tout un lot d'informations quant à votre page et sa présence dans son index. C'est très précis puisque que cela vous renvoie sur la présence éventuelle d'URL canonique, de restriction d'exploration et de la présence de votre nouvelle page dans le sitemap de votre site. L'outil Inspection d'URL démontre enfin l'étendu de sa puissance.

Pour lancer l'indexation manuelle de votre nouvelle page, il ne vous reste alors qu'à cliquer sur la touche DEMANDER UNE INDEXATION, puis attendre que l'outil mouline et vous affiche la confirmation du succès de l'opération, tout en vous rappelant que soumettre x fois votre nouvelle page ne changera rien quant à la vitesse d'indexation de cette dernière.

Ainsi, bien que Google ait une fois de plus bien fait le job, une question demeure : auparavant il était possible de demander une indexation simple de la page ou une indexation de la page et de ses liens directs. Aujourd'hui, ce choix n'est plus possible... alors qu'en est-il ?

Définir le sitemap de votre site Blogger dans Bing Webmaster Tools

Tout comme la Console Search Google, les Bing Webmaster Tools vous demande de déclarer un sitemap afin de permettre une meilleure indexation Bing des pages de votre site. Or si comme moi votre blog est construit sur la plateforme Blogger de Google, ce qui fonctionne chez l'un ne marche pas forcément chez l'autres... Explications.

Lors de l'activation de votre Blogger sur la Console Search Google, vous avez sans doute dû déclarer avec succès le sitemap suivant : https;//monsite.blogspot.com/atom.xml (voir l'article Définir le sitemap de votre Blogger dans la Search Console Google) en remplaçant bien sûr monsite par le bon nom de votre blog. En déployant les Bing Webmaster Tools peut-être avez-vous fait de même et bien que les formats atom 0.3 et atom 1.0 soient déclarés acceptables, l'outil de Microsoft vous invalide votre sitemap. En effet, il est nécessaire de déclarer un autre sitemap à Bing qui ne semble pas supporter le format atom de Blogger.

Nous allons donc reprendre la procédure dès le départ :

1. Connectez-vous à votre Bing Webmaster Tools et cliquez sur Configurer mon site/Sitemap,
2. Dans Suggérer un sitemap, indiquez : https;//monsite.blogspot.com/sitemap.xml (en remplaçant monsite par le nom de votre blog.
3. Cliquez sur Envoyer

Votre sitemap Blogger est alors en attente de validation par Bing Webmaster Tools, cela peut prendre plusieurs jours mais devrait fonctionner sans problème. Dans le cas contraire, vérifiez bien l'URL de votre sitemap en allant sur la page d'accueil de votre blog et en ajoutant /sitemap.xml à l'URL de cette dernière; un fichier texte devrait s'afficher à l'écran.

Configurer votre robots.txt pour votre site Blogger

Continuons avec la série "paramétrage de Blogger pour SEO" avec un article sur la création de votre fichier robots.txt. En effet, maintenant que la monétisation de ce site a été mise en place avec Google Adsense, l'objectif est d'accueillir un maximum de visiteurs afin d'augmenter le nombre de clics sur les annonces 😉😉😄😃 !

Plus sérieusement, le robots.txt est un fichier texte placé à la racine de votre site Web et permettant de guider les différents robots (et notamment ceux des moteurs de recherche) dans l'exploration de votre site ou de votre blog. Globalement, les instructions ont pour objectif d'autoriser ou d'interdire l'exploration et l'indexation de toutes ou parties des différentes pages de votre site. De même, on déclare habituellement dans ce fichier la localisation (à comprendre URL) du sitemap afin d'en garantir la bonne lecture par les robots de crawl. A cette étape, il est bon de rappeler que des erreurs lors de sa rédaction peuvent entraîner un déréférencement partiel ou total du site, il est donc à manier avec précaution.

Dans Blogger, le fichier robots.txt se paramètre via le backoffice en cliquant dans le menu de gauche sur Paramètres/Préférences de recherche. Dans la partie Robots d'exploration et indexation, cliquez sur modifier au niveau de Fichier Robots.txt personnalisé puis cochez l'onglet Activer et coller les instructions ci-dessous :

User-agent: Mediapartners-Google

Disallow: 

User-agent: *

Allow: /

Sitemap: https://monsite.blogspot.com/atom.xml

Au niveau du sitemap, n'oubliez pas bien sûr de modifier le fameux "monsite" par le nom de votre blog ou si vous possédez un nom de domaine personnalisé d'indiquer l'adresse de votre sitemap (si besoin se référer à l'article précédent sur la création d'un sitemap dans Blogger). Sauvegardez et le tour est joué ! Vous pouvez désormais retrouver votre fichier robots.txt à l'adresse : https://monsite.blogspot.com/robots.txt

Définir le sitemap de votre Blogger dans la Search Console Google

Les référenceurs le savent bien, si vous désirez améliorer votre position dans les moteurs de recherche il est indispensable de soumettre votre sitemap à la Search Console Google. Pas évident avec Blogger, la plateforme de blogging de Google ne vous indique pas l'URL de votre sitemap ni même si ce dernier existe.

Et pourtant de façon native, le sitemap de votre Blogger existe bel et bien, il se trouve d'ailleurs à l'URL suivante : https://monsite.blogspot.com/atom.xml
ou dans le cas où vous auriez un nom de domaine personnalisé pour votre blog : https://www.monsite.com/atom.xml.
*(NB: évidemment il faut remplacer monsite par l'adresse de votre blog)

Dès lors, vous n'avez qu'à vous rendre sur votre Search Console pour déclarer cette adresse.

1. Ancienne Interface : dans le menu de gauche sélectionnez Exploration/Sitemap puis cliquez sur Ajouter/Tester un sitemap et complétez l'URL proposée avec atom.xml et validez.
2. Nouvelle Interface : dans le menu de gauche sélectionnez Sitemaps, complétez l'URL proposée avec atom.xml et validez.

Dans le cas où votre blog ferait plus de 500 pages, il vous sera alors nécessaire de décomposer et de soumettre votre sitemap en plusieurs parties comme suit :

https://monsite.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

https://monsite.blogspot.com/atom.xml?redirect=false&start-index=501&max-results=1000

...

Il ne vous reste alors qu'à modifier votre fichier robots.txt afin d'assurer la cohérence du tout... mais cela fera l'objet d'un nouvel article !

Le réflexe de base pour améliorer votre indexation dans Google

Etre visible dans Google, c'est avant tout être présent dans Google quelque soit la position. Pour se faire, il est nécessaire que votre page soit présente dans l'index Google et de préférence le plus rapidement possible. Vous aurez alors tout loisir de travailler le référencement de cette dernière.

Rappelons à cette étape que si votre sitemap ne se met pas à jour automatiquement, il est fortement conseillé de faire son actualisation après chaque mise à jour de votre site et chaque nouvelle création de page(s). Dès la lecture de votre sitemap par les robots du moteur de recherche, ceux-ci pourront ainsi ajouter vos nouvelles pages à l'index Google. Il est cependant possible d'accélérer le mouvement tout en le rendant plus fiable :
1. Connectez-vous à la Search Console Google de votre site.
2. Allez sur Exploration dans le menu de gauche et choisissez Explorer comme Google
3. Entrez l'URL que vous désirez voir indexer et lancez l'exploration (simple suffit)
4. Une fois l'exploration effectuée, appuyez sur la touche Demander une indexation. Vous pourrez alors choisir entre 2 options : N'explorer que cette URL ou Explorer cette URL et ses liens directs. La seconde est conseillée pour les catégories ou les sous-catégories, la première pour une simple page.
5. Lancez et c'est parti !

A noter que vous êtes limités à une dizaine d'explorations simples et trois explorations avec liens par jour. N'hésitez pas à revenir sur plusieurs jours si nécessaire car en utilisant cette méthode, vous atteindrez plus facilement une couverture de l'index proche de 99% de votre sitemap.

Quelles sont principales différences entre la nouvelle et l'ancienne version de la Search Console Google ?

Cela fait déjà quelques mois qu'il est possible depuis l'interface classique de la Search Console Google d'accéder à sa nouvelle version. Mais qu'elles sont les principaux atouts apportés par cette dernière pour vous aider à mieux référencer votre site ?

Ne tournons pas autour du pot, la nouvelle Search Console ne se substituera pas encore à l'ancienne dans votre utilisation au quotidien. Il est ainsi impossible de lancer manuellement l'indexation d'une page ou de connaître vos balises méta en doublon. Cependant, elle peut vous apporter des éléments d'analyse supérieurs à ceux présents dans l'ancienne version.

1. Tout d'abord, pour ce qui est de l'analyse de recherche et notamment votre nombre d'impressions et de clics, vous n'êtes plus bridé à 90 jours et pouvez remonter sur une période personnalisée bien plus large. Finies les exportations mensuelles afin de pouvoir conserver l'historique de vos clics, de vos impressions ou de votre position.

2. Concernant la couverture de l'index, ce dernier indicateur est désormais rafraîchi plus régulièrement et donne plus de précisions. Vous pouvez désormais connaitre en plus du nombre de pages indexées, le nombre de pages soumises à URL canoniques, le nombre de pages redirigées, les erreurs d'indexation ainsi que les pages en cours d'indexation. De même, par simple clic sur la données, vous avez accès à ses détails, c'est-à-dire aux URL de pages présentes dans chacune des rubriques.

3. Vous disposez d'une nouvelle fonction appelée "Ergonomie Mobile", cette dernière vous permet de connaître les pages souffrant de problèmes liés à la largeur de l'écran ou des problèmes liés à des éléments cliquables trop proches les uns des autres. Personnellement, je n'ai pas encore suffisamment étudié le sujet pour en valider la pertinence.

4. Enfin, une dernière fonctionnalité appelée "Inspection d'URL" vous permet de vérifier pour une URL donnée sa présence dans l'index Google et son adaptabilité pour les mobiles.

Vous pouvez ainsi le constater, bien qu'elle manque encore de fonctionnalités essentielles dans son ancienne version, la nouvelle Search Console Google vous offre de nouvelles informations utiles pour la correction de votre sitemap et l'étude statistiques de votre site. reste à attendre les prochaines mises à jour...