Exclusion a tort par le fichier robots.txt ?

Le module GYM Sitemaps and RSS et ses plug-ins.
Plans de site Google Yahoo et MSN Sitemaps (0.9 United Sitemaps).
Flux RSS 2.0.
Yahoo! urllist.txt.

Modérateur: Modérateurs

Exclusion a tort par le fichier robots.txt ?

Messagede lemoussel » Sam Aoû 16, 2008 6:18 am

Google m'indique 5 URL à accès restreint par le fichier robots.txt.
Les voici :
http://www.ville-arnieressuriton.com/forum/post83.html
http://www.ville-arnieressuriton.com/forum/viewforum.php?f=10
http://www.ville-arnieressuriton.com/forum/viewtopic.php?f=12&t=36&start=0&st=0&sk=t&sd=a&view=print
http://www.ville-arnieressuriton.com/forum/viewtopic.php?f=14&t=34&start=0&st=0&sk=t&sd=a&view=print
http://www.ville-arnieressuriton.com/forum/viewtopic.php?f=7&t=35&start=0&st=0&sk=t&sd=a&view=print

et voici mon fichier robots.txt :
User-agent: *
Allow: /
Disallow: /nolink.htm
Disallow: /nolink_trap.htm
Disallow: /cgi-bin/
Disallow: /wanewsletter/
Disallow: /forum/viewtopic.php
Disallow: /forum/viewforum.php

Disallow: /forum/index.php?
Disallow: /forum/posting.php
Disallow: /forum/search.php?
Disallow: /forum/ucp.php
Disallow: /forum/mcp.php
Disallow: /forum/post
Disallow: /forum/membre
Disallow: /forum/memberlist.php
Disallow: /forum/faq.php


Je cromprends pourquoi les URL en verte sont exclues
Mais pourquoi l'URL en rouge est elle exclue ? Est ce normal ?
(J'utilise la Premod 3.0.2 en Intermediaire)
Dernière édition par lemoussel le Mar Déc 30, 2008 2:41 pm, édité 1 fois.
Webmaster du forum L'itonScope. Le forum où l'on parle de tout et de rien !
Prévisions météo des départements de France .
Avatar de l’utilisateur
lemoussel
PR1
PR1
 
Messages: 113
Inscription: Ven Juil 18, 2008 6:42 am
Localisation: Haute-Normandie, Arnières sur Iton

Publicité

Re: Exclusion a tort par le fichier robots.txt ?

Messagede philippe » Sam Aoû 16, 2008 8:28 am

lemoussel a écrit:Google m'indique 5 URL à accès restreint par le fichier robots.txt.
Les voici :
http://www.ville-arnieressuriton.fr/forum/post83.html
http://www.ville-arnieressuriton.fr/forum/viewforum.php?f=10
http://www.ville-arnieressuriton.fr/forum/viewtopic.php?f=12&t=36&start=0&st=0&sk=t&sd=a&view=print
http://www.ville-arnieressuriton.fr/forum/viewtopic.php?f=14&t=34&start=0&st=0&sk=t&sd=a&view=print
http://www.ville-arnieressuriton.fr/forum/viewtopic.php?f=7&t=35&start=0&st=0&sk=t&sd=a&view=print

et voici mon fichier robots.txt :
User-agent: *
Allow: /
Disallow: /nolink.htm
Disallow: /nolink_trap.htm
Disallow: /cgi-bin/
Disallow: /wanewsletter/
Disallow: /forum/viewtopic.php
Disallow: /forum/viewforum.php

Disallow: /forum/index.php?
Disallow: /forum/posting.php
Disallow: /forum/search.php?
Disallow: /forum/ucp.php
Disallow: /forum/mcp.php
Disallow: /forum/post
Disallow: /forum/membre
Disallow: /forum/memberlist.php
Disallow: /forum/faq.php


Je cromprends pourquoi les URL en verte sont exclues
Mais pourquoi l'URL en rouge est elle exclue ? Est ce normal ?
(J'utilise la Premod 3.0.2 en Intermediaire)


La réponse en bleu
Philippe
Webmaster du forum de Portail New Beetle | special-t
philippe
phpBB SEO Team
phpBB SEO Team
 
Messages: 601
Inscription: Ven Juin 23, 2006 12:00 pm
Localisation: Région Parisienne

Messagede lemoussel » Sam Aoû 16, 2008 8:45 am

Cela signifie t'il que tous les post correspondant aux messages du forum vont être exclues ? :cry:

En effet avec la Premod SEO 3.0.2 en intermédiare, tous les messages sont re-codées en http://www.ville-arnieressuriton.fr/for ... orum/topic99.html

Ex : Forum référencé par les moteurs de recherche : http://www.ville-arnieressuriton.fr/for ... pic35.html

La solution est elle de supprimmer la ligne Disallow: /forum/post dans le fichier robots.txt ?
Webmaster du forum L'itonScope. Le forum où l'on parle de tout et de rien !
Prévisions météo des départements de France .
Avatar de l’utilisateur
lemoussel
PR1
PR1
 
Messages: 113
Inscription: Ven Juil 18, 2008 6:42 am
Localisation: Haute-Normandie, Arnières sur Iton

Messagede SeO » Sam Aoû 16, 2008 9:31 am

Les url de posts sont des duplicates des urls de sujets, qui fort heureusement suffisent à lister 100% du contenu du forum (une page de sujet contient plusieurs messages), donc, le but, c'est effectivement de s'assurer que seules les urls de sujet sont indexées.
SeO
Admin
Admin
 
Messages: 6333
Inscription: Mer Mar 15, 2006 9:41 pm

Messagede lemoussel » Sam Aoû 16, 2008 9:34 am

Donc si je comprends bien, Tout est OK. :D
Je ne change rien. :wink:
Webmaster du forum L'itonScope. Le forum où l'on parle de tout et de rien !
Prévisions météo des départements de France .
Avatar de l’utilisateur
lemoussel
PR1
PR1
 
Messages: 113
Inscription: Ven Juil 18, 2008 6:42 am
Localisation: Haute-Normandie, Arnières sur Iton


Retourner vers GYM Sitemaps phpBB2

Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 2 invités