slt

j'ai mis un robots.txt comme vous

Code: Tout sélectionner

User-agent: *
Disallow: /forums/viewtopic.php?
Disallow: /forums/viewforum.php?
Disallow: /forums/index.php?
Disallow: /forums/posting.php?
Disallow: /forums/groupcp.php
Disallow: /forums/profile.php?
Disallow: /forums/memberlist.php
Disallow: /forums/search.php?
Disallow: /forums/login.php
Disallow: /forums/faq.php

si je comprend bien les bots ne referenceront pas ces pages ? meme l'index ?

morphoSEO,

C'est tout à fait cela, mais attention le ? aprés index a son importance

Cela signifie que ce sont les urls du type /index.php?..... qui ne seront pas référencé mais ta page /index.php elle, sera bien référencée

Par contre, je te conseille de retirer le ? pour toutes les autres pages car dans ce cas là on ne veut vraiment pas référencer ce type d'URL

conseil :

Ajoutes :

Code: Tout sélectionner

Disallow: /forums/post

Et voir :

Code: Tout sélectionner

Disallow: /forums/membre

Comme conseillé sur le sujet de release du mod rewrite que tu utilises

++

merci elglobo, merci dcz

sinon c'est quoi l'utilité de Disallow: /forums/post et l'autre ?

bah en gros ça donnera ça

Code: Tout sélectionner

User-agent: *
Disallow: /forums/viewtopic.php
Disallow: /forums/viewforum.php
Disallow: /forums/index.php?
Disallow: /forums/posting.php
Disallow: /forums/groupcp.php
Disallow: /forums/profile.php
Disallow: /forums/memberlist.php
Disallow: /forums/search.php
Disallow: /forums/login.php
Disallow: /forums/faq.php
Disallow: /forums/membre
Disallow: /forums/post

Post, c'est les messages (15 duplicates par pages de sujet en générale) et membre, c'est le profils de membres, pas toujours utile à référencer, voir pas du tout, et même, pas bon au début de l'existence d'un site, car les profils sont beaucoup liés et risquent donc d'être mis en cache avant les pages des sujets.
Ce qui ne manquerait pas de ralentir l'ensemble du processus d'indexation, car ces pages sont assez pauvres pour un moteur de recherche.

++

Elglobo a écrit:
Par contre, je te conseille de retirer le ? pour toutes les autres pages car dans ce cas là on ne veut vraiment pas référencer ce type d'URL

ok mais il faut laisser ? devant viewtopic.php et viewforum non ? car beaucoup de sites que je connait le laisse

@dcz : ok mais c'est bien de referencer les messages des users non ? ça va ramener beaucoup de mondes . Pour les profils tout à fait d'accord avec toi

En fait, les url des sujet suffisent à indexer tous les messages, les url de post sont simplement des duplicates inutiles.

++