Bonjour à tous,

Mon forum existe depuis 3 ans, ( -http://www.sunsetbld.com/forum )je l'ai passé en phpbb3 il y a quelques mois, et malgré "l'ancienneté", Google a réussi péniblement à mettre en cache à ce jour 144 pages, alors que le forum compte aujourd'hui près de 9000 messages.
Je suis en url rewrité intermédiaire (merci phpbbSEO) avec zero duplicate.
L'autorisation pour les bots a été paramétré comme pour les visiteurs (donc en lecture seule).

Aurais-je raté un épisode ??

Merci par avance pour votre aide.

En effet avec 1202 sujets, tu devrais approcher des 1200 / 1300 pages en cache, mais cela dépend de si tous ces sujets sont publics ou non.

Plusieurs raisons pourrait expliquer cette lenteur.

Premièrement, tu as mis en place le robots.txt avec les disallow pour les urls naturelles du forum :http://www.sunsetbld.com/robots.txt
Donc si tu l'a fait alors que ton forum était indexé avec les urls naturelles de phpBB, cela suffit à tout expliquer (cf les avertissements concernant le robots.txt dans l'installe). Si c'est le cas, pas grand chose à faire que d'attendre au point ou tu en es, ça va venir.

Ensuite, en testant un 404 je tombe sur une page d'erreur perso :

La page que vous avez demandée n'existe plus ou bien a changé d'adresse.

qui renvois un header 200 : http://www.sunsetbld.com/404

HTTP Status Code: HTTP/1.1 200 OK

Et c'est pas bon du tout, surtout si comme ton message le laisse penser, tu a vraiment changer un certain nombre d'url de place sans les rediriger.
Il faut donc au plus vite que tu modifies ton script pour sortir un header 404 sur tes 404, cela ne sauvera pas la redirection des pages qui auraient du l'être, mais ce sera déjà mieux (note que tu peux toujours mettre en place des redirections si jamais tu en avait a faire, car avec ta 200, ces urls ne sont sûrement pas sorties des crawling list des bots).

Enfin, pour les autorisations des bots, vérifies juste que tous tes forums publics sont bien en cache chez google, et que tu ne vois pas le message "vous n'avez pas le droit de voir cette page", c'est le seul test vraiment valable.

Et pour la suite, installer GYM sitemaps pourrait être utile pour accélérer le crawl de tes nouvelles urls

++

Merci beaucoup pour ce retour !
Pour le robots.txt, tu me confirme que je ne le touche pas ?

Pour l'erreur 404 qui renvoie un header 200 : pourrais-tu m'expliquer comment modifies mon script pour sortir un header 404 sur les 404 ?? Edit : je viens de rajouter au début de la page 404 ceci :

Code: Tout sélectionner

<?php header('HTTP/1.0 404 Not Found'); ?>

Ca te semble correct ?

Enfin, dois-je revoir le htacess pour les redirections (maintenant que le mal est fait) ?

Merci encore de ton aide précieuse !!

JC a écrit:Pour le robots.txt, tu me confirme que je ne le touche pas ?

Tout dépend de ton "il y a quelques mois", si ça fait vraiment plus de trois ou quatre, je doute que cela change grand chose de le virer, mais avec le zéro duplicate, tu pourrais quand même le virer un mois ou deux juste au cas ou.

JC a écrit:je viens de rajouter au début de la page 404 ceci :

Code: Tout sélectionner

<?php header('HTTP/1.0 404 Not Found'); ?>

Ca te semble correct ?

Ca l'est, mais passe en HTTP/1.1 tant que tu y es

Code: Tout sélectionner

header('HTTP/1.1 404 Not Found');

JC a écrit:Enfin, dois-je revoir le htacess pour les redirections (maintenant que le mal est fait) ?

Si tu as un paquet de pages qui se sont retrouvées en 404, alors oui, rediriges les (et uniquement celles-ci) au moins vers l'index de ton forum.

++

Salut et merci de ton aide !

1/ J'ai vidé hier le fichier robots.txt, j'ai donc bien fait !
2/ pour le Header, je modifierai cela ce soir !
3/ pour les redirections, elles sont déjà prêtes à etre ajoutées au htaccess !

A suivre...

Bonjour,

Quelques (bonnes) nouvelles ! Les affaire reprennent ! 141 pages indexées le 18 mai, 180 aujourd'hui !

Concernant les redirections via le htaccess :

Je souhaite renvoyer la page -http://www.sunsetbld.com/forum/topic63.html vers l'index du forum
J'ai donc placé la ligne suivante :

Code: Tout sélectionner

RedirectPermanent /forum/topic63.html  http://www.sunsetbld.com/forum/

Or, le navigateur renvoie vers cette URL : -http://www.sunsetbld.com/forum/?forum_uri=&t=63&start=

Bon, j'arrive bien sur l'index du forum, mais l'URL me parait bizarre. C'est normal ??

Merci par avance de ton aide !

Bonjour,

Les nouvelles ne sont pas bonnes !

L'indexation du forum est monté jusqu'à un maximum de 198 pages le 18 Juin.
Depuis, ça re-dégringole chaque jour ! Au dernier pointage, je suis à 133 pages.

Tout ça, sans rien toucher depuis fin Mai.

J'avoue que je ne comprends plus rien... et dire que je vais avoir 10000 topics au compteur du forum... désepérant....

Merci par avance de votre aide !

Mais tu les as redirigées tes 404 qui devaient l'être ou pas ?

Car si tu as juste corrigé le header 404, il est clair que google n'aime pas trop voir un max de pages disparaître et qu'il lui faut du temps pour s'en remettre.

++

Bonjour,
La très grande majorité des 404 sont redirigées aujourd'hui !

Je viens de constater un truc bizarre dans les mails de notifications de nouveau messages sur le forum !

Pour voir les nouvelles réponses, cliquez sur le lien suivant:
/forum/viewtopic.php?f=19&t=1955&p=14764&e=14764

Pour voir le sujet dans son ensemble, cliquez sur le lien suivant:
/forum/topic1955.html

Pour visiter le forum, cliquez sur le lien suivant:
/forum/direct-californie-ouest-usa.html

Est-ce normal que le lien pour voir les nouvelles réponses ne soit pas rewrité ? (alors que les 2 autres le sont)

Merci par avance pour votre aide !

Il semblerait que ce soit normal car le lien se transforme correctement sous la forme url-rewritée voulue !

Le Zero Duplicate est fait pour ça, donc aucun problème pour le référencement


Mathieu.

Et de plus, c'est fait exprès, la variable GET "e" force le login dans ce lien :
/forum/viewtopic.php?f=19&t=1955&p=14764&e=14764

C'est donc inutile de réécrire ce lien, et de plus, les bots ne reçoivent pas encore de mails

++

Salut,
Merci pour vos explications
Pour en revenir un sujet principal :

J'ai de vieilles URL de l'époque phpbb2 qui ressortent dans GWT.
Et elles ne sont pas redirigées
Il me faudrait donc rediriger (via htaccess je suppose) ftopicXX.php vers topicXX.html
Comment dois-je procéder ?
Merci encore de votre aide !

ftopicXX.php, ça sent le rewrite de dlp ça, dans tous les cas, il faut que tu mettes les rewriterules de phpBB2 à la fin de ton .htaccess pour phpBB3 avec les bon chemin, et le zéro duplicate fera le reste

++

Bon, j'ai vraiment peur de faire des bétises

Voici les rules de phpbb2 :

RewriteEngine On
RewriteRule ^forums.* index.php
RewriteRule ^mforum([0-9]*).* viewforum.php?f=$1&mark=topics
RewriteRule ^viewforum([0-9]*)-([0-9]*)-([0-9]*).* viewforum.php?f=$1&topicdays=$2&start=$3
RewriteRule ^forum([0-9]*).* viewforum.php?f=$1
RewriteRule ^ptopic([0-9]*).* viewtopic.php?t=$1&view=previous
RewriteRule ^ntopic([0-9]*).* viewtopic.php?t=$1&view=next
RewriteRule ^stopic([0-9]*)-([0-9]*).* viewtopic.php?t=$1&watch=topic&start=$2
RewriteRule ^utopic([0-9]*)-([0-9]*).* viewtopic.php?t=$1&unwatch=topic&start=$2
RewriteRule ^ftopic([0-9]*)-([0-9]*)-([a-zA-Z]*)-([0-9]*).* viewtopic.php?t=$1&postdays=$2&postorder=$3&start=$4
RewriteRule ^ftopic([0-9]*)-([0-9]*).* viewtopic.php?t=$1&start=$2
RewriteRule ^ftopic([0-9]*).* viewtopic.php?t=$1
RewriteRule ^ftopic([0-9]*).html viewtopic.php?t=$1&start=$2&postdays=$3&postorder=$4&highlight=$5
RewriteRule ^setopic_([0-9]*)-([a-zA-Z0-9]*).* viewtopic.php?t=$1&highlight=$2
RewriteRule ^sutra([0-9]*).* viewtopic.php?p=$1
RewriteRule ^newtopic([0-9]*).* viewtopic.php?t=$1&view=newest

J'imagine que je ne dois pas les placer en l'état dans le htaccess... mais là je sèche....