| :: |
| Auteur |
Message |
franckcara PR1


Inscrit le: 23 Fév 2007 Messages: 177
|
Posté le: Mar Fév 27, 2007 11:50 am Sujet du message: Probleme Robots.txt [RESOLU] |
|
|
Bonjour,
j'ai installé ce fichier robots.txt
| Code: | User-agent: *
Disallow: /Forum-informatique/viewtopic.php
Disallow: /Forum-informatique/viewforum.php
Disallow: /Forum-informatique/index.php?
Disallow: /Forum-informatique/posting.php
Disallow: /Forum-informatique/groupcp.php
Disallow: /Forum-informatique/search.php
Disallow: /Forum-informatique/login.php
Disallow: /Forum-informatique/privmsg.php
Disallow: /Forum-informatique/post
Disallow: /Forum-informatique/membre
Disallow: /Forum-informatique/profile.php
Disallow: /Forum-informatique/memberlist.php
Disallow: /Forum-informatique/faq.php |
Je l'ai mis à la racine du site (à l'exterieur du www)
et j'ai essayé aussi a l'interieur du WWW
et pourtant il n'y a rien à faire je retrouve toujours des bots en train de crawler le profil des membres.
Pourquoi?????  |
Dernière édition par franckcara le Mar Fév 27, 2007 2:19 pm; édité 1 fois |
|
| Revenir en haut de page |
|
 |
|
 |
dcz Administrateur - Site Admin

Inscrit le: 28 Avr 2006 Messages: 13777
|
Posté le: Mar Fév 27, 2007 12:34 pm Sujet du message: Re: Probleme Robots.txt [RESOLU] |
|
|
Donc, c'est dans le dossier www/ (dans ton cas) qu'il faut le mettre. Il faut juste qu'il soit accessible à la racine du domaine : example.com/robots.txt
Ensuite, c'est pas instantané, il faut que les bots le trouvent, le télécharge, et prennent acte des instructions qui s'y trouvent avant qu'il ne cessent de crawler les urls interdites. Et c'est encore plus long pour les voir totalement disparaître de leur index.
Et il y a également des ratés, peu en général avec les principaux moteurs de recherches, et des bots qui ne respectent tout bonnement pas ces directives (Google, msn et yahoo les respectent, le plus souvent).
++ |
_________________ Useful links :
SEO Forum || SEO Directory || SEO phpBB || SEO phpBB3 || Search
____________________
Liens Utiles :
Forum référencement || Annuaire référencement || Référencement phpBB || Référencement phpBB3 || Recherche |
|
| Revenir en haut de page |
|
 |
franckcara PR1


Inscrit le: 23 Fév 2007 Messages: 177
|
|
| Revenir en haut de page |
|
 |
dcz Administrateur - Site Admin

Inscrit le: 28 Avr 2006 Messages: 13777
|
|
| Revenir en haut de page |
|
 |
franckcara PR1


Inscrit le: 23 Fév 2007 Messages: 177
|
Posté le: Mar Fév 27, 2007 2:19 pm Sujet du message: Re: Probleme Robots.txt [RESOLU] |
|
|
merci  |
|
|
| Revenir en haut de page |
|
 |
rogerlebouledogue phpBB SEO Team


Inscrit le: 22 Juil 2006 Messages: 354 Localisation: Belle-Ile (56)
|
Posté le: Mer Fév 28, 2007 7:41 am Sujet du message: Re: Probleme Robots.txt [RESOLU] |
|
|
Tu devrais soit forcer ton adresse avec les www, soit forcer ton adresse sans les www !
Car pour le moment, ton site est accessible avec ou sans les www, donc ça te fait deux sites, avec le même contenu, mais avec des URL différentes, donc => Duplicat ...
Va faire un tour ici, et je pense que tu comprendras ce que je veux dire ...
@+.  |
_________________ Le forum de Rogerlebouledogue |
|
| Revenir en haut de page |
|
 |
franckcara PR1


Inscrit le: 23 Fév 2007 Messages: 177
|
Posté le: Mer Fév 28, 2007 1:25 pm Sujet du message: Re: Probleme Robots.txt [RESOLU] |
|
|
| Je me suis posé la question mais si j'enleve le WWW ,vais je perdre des liens sur google????? |
|
|
| Revenir en haut de page |
|
 |
dcz Administrateur - Site Admin

Inscrit le: 28 Avr 2006 Messages: 13777
|
|
| Revenir en haut de page |
|
 |
|
|