comment configurer le robots.txt

[xpmen]

bonjour,
j'ai parcouru le fofo, mais pas trouver de réponse(ou j'ai pas chercher assez )

voila, en suivant le guide de google, je voudrai installer le fichier robots.txt.

seulement, je comprend pas très bien comment le configurer, a chaque recherche, je tombe sur des explication en anglais
et comme moi et l'anglais, sa fait deux .

merci de votre aide

ps: mise a part cette question, est il vraiment utile et apporte il vraiment un plus ?

[dav38]

salut, mais si tu a des postes consacrer à ça dans la partie référencement du forum.

[xpmen]

alors , je vais a nouveau re parcourir le forum

car j'ai pas trouver quoi mettre dans le fichier robots.txt
(en démarrant de rien)

merci quand même

[dcz]

En fait, ça dépend de ton site. Le robots.txt est un simple fichier texte dans lequel il est possible d'interdire l'indexation de certaine URLs, ou types d'URL (par dossier, par script etc ...). On l'utilise donc pour éviter les duplicates, quand plusieurs URLs peuvent mener à la même page, comme une URL de sujet et de message sur phpBB.

Donc, la première chose, c'est de déterminer si ton site as des duplicates, et si oui lesquels (quel type plus précisément).

Tu as des exemple de robots.txt sur les sujet de mise à disposition des mod rewrite phpBB SEO, ils sont valable pour ces mod, mais la syntaxe étant très simple, ça peu aider.

++

[xpmen]

merci dcz

[gortex]

J'ai le meme soucis je cherche a savoir comment configuré mon fichier robots le seul hic est que sur mon forum pour le moment je ne peux pas faire de reecriture des urls vu que je suis chez free donc je ne suis pas sur que les robots present dans ces mods puisse me convenir.

Merci d'avance pour votre aide

[dcz]

En effet, il ne faut pas utiliser le robots.txt déstiné à la réécriture d'url sans réécriture d'url.

Et du coup, pas grand chose à interdire ...

[gortex]

Donc si je comprend bien dans mon fichier robot je ne met rien du tout?

[dcz]

Malheureusement oui, car il n'est pas possible d'interdire les urls de messages non réécrites vu qu'elles contiennent en général l'id du forum, voir du sujet aussi.

Tu pourrais par contre jouer avec le mod méta dynamiques pour interdire les urls de posts, en remplaçant :

[gortex]

Merci pour ce code je le ferai ce soir. Par contre pour aidé le referencement est ce que le fichier googlemap1.xml est utile? Faut il mettre quelques chose dedans de particulier ?

[dcz]

Oui, les sitemaps google sont utiles => GYM sitemaps