Lorsque vous bloquez GoogleBot, le robot d'indexation de Google visant à recenser et indexer les pages, la page bloquée peut toujours apparaître dans les résultats de recherche Google à cause de liens pointant vers ce site. Mais Google n'est alors pas capable d'indexer la page et de créer un titre et une description. Au lieu de cela, Google « tentera le coup », presque au hasard, pour le titre et laissera souvent la description blanche.
A présent, au lieu de laisser un blanc, Google montre un message expliquant pourquoi Google ne peut montrer la description.
Le message dit:
Une description pour ce résultat n'est pas disponible à cause du fichier robots.txt de ce site. En savoir plus.
Google peut donc maintenant montrer une description pour une page expliquant que quelque chose empêche GoogleBot de l'indexer. Le lien « en savoir plus » mène vers un document d'aide avec plus de détails sur le problème.
Non seulement cela donne à l'internaute une meilleure expérience de recherche, mais c'est aussi, pour le webmaster, une autre explication sur les problèmes de son site, sans passer par Google Webmaster Tools.
Source: Searchengineland.com