Mon robot.txt ne sert à rien !!!

Forums spécifiques au moteur de recherche Google, Référencement, PageRank, AdSense, AdWords, services, utilisation ...

Modérateur: Modérateurs

Mon robot.txt ne sert à rien !!!

Messagede mellosmoothe » Dim Aoû 20, 2006 9:08 am

D'abord j'ai un problème... aucune visite de google depuis que tout est en place sur mon forum.

www.funkhome.com/robotstats/

Ensuite, je fais un teste sur google avec mon domaine et je remarque qu'il me sort quasiment que des adresses renvoyant vers des profils de membre, alors qu'il me semble avoir interdit ce type d'adresse...

Bref il interdit rien visiblement et je comprend pas pourquoi.

Code: Tout sélectionner
User-agent: *
Disallow: /viewtopic.php
Disallow: /viewforum.php
Disallow: /index.php?
Disallow: /posting.php
Disallow: /groupcp.php
Disallow: /search.php
Disallow: /login.php
Disallow: /post
Disallow: /membre
Disallow: /profile.php
Disallow: /memberlist.php
Disallow: /faq.php

# URL rewrit�es
disallow: /-br*
disallow: /-image*
disallow: /1-*
disallow: /ici_*
disallow: /image_*
disallow: /mark*
disallow: /next*
disallow: /post-*
disallow: /stop-updates-topic*
disallow: /updates-topic*
disallow: /voir-le-sujet*


Merci d'avance encore une fois...

Sinon pourquoi les robots (aucun) ne passent, allez comprendre :lol:
mellosmoothe
 
Messages: 31
Inscription: Jeu Aoû 10, 2006 1:40 am

Publicité

Messagede dcz » Dim Aoû 20, 2006 10:02 am

Pour les passages de bots, avec 138 Backlinks et 1230 URLs indexées, je pense vraiment que Google Bot passe chez toi ;)

Tu dois avoir mal fait quelque chose avec robots stats, revois l'installe, particulièrement, le changement à faire dans page_tail.php.

La seul preuve qui vaille pour les connections, c'est les logs Apache, jette y un oeil, recherche "Google" tu devrais être rassuré.

Ensuite, dans ton robots.txt, tout va bien, je n'ai jamais commenté de code dans un robots.txt, je ne suis pas certain que # soit compris par tous les bots, du coup je n'en mettrais pas.

Par contre il est correct.

Je constate en effet qu'il y a quelques URLs de membres en cache, je pense que c'est plutôt dû au fait que Google passant régulièrement sur ton site, il l'a visité avant l'upload du robots.txt.

Mais la majorité des liens sont des URLs naturelles et sans PageRank, dont une bonne proportion avec SID.

Du coup je pense qu'un peut de ménage pourrait faire du bien.

Utilise L'outil de suppression automatique de Google (et pas tout ton site, juste les URLs interdite par robots.txt).
Tu soumets ton robtos.txt et hop, elle vont toutes être retirées d'un coup, tu y perdra pas grand chose, vu que ces pages n'avaient pas de PageRank, et pour beaucoup de SID.

Cela permettra à Google de se concentrer sur les bonne URLs.

Avec mx Sitemaps et ton PageRank, cela devrait être assez rapide pour Google de tout réindexer (pour elglobo, 38 000 URLs en un mois ;) avec un PR3).

++
Useful links :
SEO Forum || SEO Directory || SEO phpBB || Search
____________________

Liens Utiles :
Forum référencement || Annuaire référencement || Référencement phpBB || Recherche
dcz
Admin
Admin
 
Messages: 21382
Inscription: Ven Avr 28, 2006 9:03 pm

Messagede mellosmoothe » Dim Aoû 20, 2006 11:04 am

Je m'en suis occupé... j'attend quelques jours...

en attendant je vais verifier si les robots passent de manière transparente et mon robotstats.
mellosmoothe
 
Messages: 31
Inscription: Jeu Aoû 10, 2006 1:40 am

Messagede mellosmoothe » Dim Aoû 20, 2006 11:11 am

Les logs apache je les consulte comment sur un serveur mutualisé comme nuxit ?

Je cherche je trouve pas :)
mellosmoothe
 
Messages: 31
Inscription: Jeu Aoû 10, 2006 1:40 am

Messagede dcz » Dim Aoû 20, 2006 2:08 pm

Il faut leur demander, tu n'as pas une interface avec des statistiques ?

Regarde si il n'y a pas des stats sur les User_Agent, et cherche "google".

De toutes façons, le fait que ton site soit indéxé prouve en soit que Google visite ton forum.

++
Useful links :
SEO Forum || SEO Directory || SEO phpBB || Search
____________________

Liens Utiles :
Forum référencement || Annuaire référencement || Référencement phpBB || Recherche
dcz
Admin
Admin
 
Messages: 21382
Inscription: Ven Avr 28, 2006 9:03 pm


Retourner vers Forums Google

 


  • Articles en relation
    Réponses
    Vus
    Dernier message

Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 5 invités


 
cron