Mon robot.txt ne sert à rien !!!

[mellosmoothe]

D'abord j'ai un problème... aucune visite de google depuis que tout est en place sur mon forum.

www.funkhome.com/robotstats/

Ensuite, je fais un teste sur google avec mon domaine et je remarque qu'il me sort quasiment que des adresses renvoyant vers des profils de membre, alors qu'il me semble avoir interdit ce type d'adresse...

Bref il interdit rien visiblement et je comprend pas pourquoi.

Code: Tout sélectionner

User-agent: *
Disallow: /viewtopic.php
Disallow: /viewforum.php
Disallow: /index.php?
Disallow: /posting.php
Disallow: /groupcp.php
Disallow: /search.php
Disallow: /login.php
Disallow: /post
Disallow: /membre
Disallow: /profile.php
Disallow: /memberlist.php
Disallow: /faq.php

# URL rewrit�es
disallow: /-br*
disallow: /-image*
disallow: /1-*
disallow: /ici_*
disallow: /image_*
disallow: /mark*
disallow: /next*
disallow: /post-*
disallow: /stop-updates-topic*
disallow: /updates-topic*
disallow: /voir-le-sujet*

Merci d'avance encore une fois...

Sinon pourquoi les robots (aucun) ne passent, allez comprendre

[dcz]

Pour les passages de bots, avec 138 Backlinks et 1230 URLs indexées, je pense vraiment que Google Bot passe chez toi

Tu dois avoir mal fait quelque chose avec robots stats, revois l'installe, particulièrement, le changement à faire dans page_tail.php.

La seul preuve qui vaille pour les connections, c'est les logs Apache, jette y un oeil, recherche "Google" tu devrais être rassuré.

Ensuite, dans ton robots.txt, tout va bien, je n'ai jamais commenté de code dans un robots.txt, je ne suis pas certain que # soit compris par tous les bots, du coup je n'en mettrais pas.

Par contre il est correct.

Je constate en effet qu'il y a quelques URLs de membres en cache, je pense que c'est plutôt dû au fait que Google passant régulièrement sur ton site, il l'a visité avant l'upload du robots.txt.

Mais la majorité des liens sont des URLs naturelles et sans PageRank, dont une bonne proportion avec SID.

Du coup je pense qu'un peut de ménage pourrait faire du bien.

Utilise L'outil de suppression automatique de Google (et pas tout ton site, juste les URLs interdite par robots.txt).
Tu soumets ton robtos.txt et hop, elle vont toutes être retirées d'un coup, tu y perdra pas grand chose, vu que ces pages n'avaient pas de PageRank, et pour beaucoup de SID.

Cela permettra à Google de se concentrer sur les bonne URLs.

Avec mx Sitemaps et ton PageRank, cela devrait être assez rapide pour Google de tout réindexer (pour elglobo, 38 000 URLs en un mois avec un PR3).

++

[mellosmoothe]

Je m'en suis occupé... j'attend quelques jours...

en attendant je vais verifier si les robots passent de manière transparente et mon robotstats.

[mellosmoothe]

Les logs apache je les consulte comment sur un serveur mutualisé comme nuxit ?

Je cherche je trouve pas

[dcz]

Il faut leur demander, tu n'as pas une interface avec des statistiques ?

Regarde si il n'y a pas des stats sur les User_Agent, et cherche "google".

De toutes façons, le fait que ton site soit indéxé prouve en soit que Google visite ton forum.

++