Diagnostic exploration du site : url bloquées par robots.txt

[gowap]

Via son interface sitemaps google propose un disgnostic relatif a l'exploration qu'il fait de votre site web.
Il permet de lister tout ce qui a pu l'interrompre dans son indexation de votre site :
les Erreurs HTTP
les pages Introuvable
les URL avec expiration du délai
les URL inaccessibles
les URL non suivies
les URL restreintes par un fichier robots.txt

C'est a ces dernieres que je me suis interessé ce soir, et force est de constater que google liste un peu n'importe quoi a cet endroit.
Il me sort des pages comme :

[dcz]

En fait l'interface est pas au top de sa fiabilité, pas vraiment qu'elle ne marche pas, mais que des fois, les erreurs n'existent tout bonnement pas.

Dans ton cas, c'est bien plus simple, ces deux URLs appartiennent à des forums privés (invisible en invité)

C'est les AdSense, Google s'en sert aussi pour trouver des URLs qu'il ne peut pas toujours explorer concrètement.

++

[gowap]