Visite et indexation des pages par Google

[Marie]

Bonjour

Il y a un truc que je comprends pas chez Google.
Si je regarde les stats de Spywords, il apparait que Google a visité à plusieurs reprises des topics de mon forum. Le code retourné est 200, donc manifestement, il n'a pas eu de problèmes pour les lire.

Exemple de topics:

-http://www.micro-astuce.com/Forum/topic540-15.html
-http://www.micro-astuce.com/Forum/topic675.html
Tous 2 visités le 19/08

Or, ces topics n'apparaissent toujours pas dans la commande Site.

Les forums par contre sont bien indexés.

C'est normal d'après vous ? Je pensais qu'à partir du moment où une page était visitée par le robot, elle était indexé.
Déjà qu'il lit maxi 3 pages par jour, si en plus il les indexe pas je suis pas rendue!

[game252]

Heu, oui c'est pas parce qui crawle une page qu'il l'indexe automatiquement.

Deja pour un page qu'il indexe il y a un delai entre le jour du crawl et le jour ou elle apparait dans google.

Ensuite toutes tes pages ne seront pas forcement dans google meme si le robot est venue la visiter.

Ensuite je ne sait pas exactement comment il choisi, mais ne t'inquiette pas ton probleme est un peu le meme pour tout les webmasters, mais est normal.

[dcz]

Tout à fait, et de plus, ce sont deux bon exemples de pages avec très peut de contenu, il est normal que Google les apprécie un peut moins.

Dans tous les cas, il est clair que le 100% en cache est assez difficile à tenir, entre les pages qui sont en train d'être remise en cache, celles qui ne le sont pas encore, et celles qui sont victimes d'aléas plus ou moins compréhensibles, déjà ça en fait. Et comme, bien entendu, Google fait des choix, il existe un purgatoire au paradis Google Crawlé, mais pas caché.

Ce qui serait vraiment grave c'est que des pages avec du contenu intéressant soit pénalisées, là, je doute que beaucoup de recherches auraient menés à ces pages, et c'est peut être le raisonnement de Google ...

Par contre, en jetant un oeil à ton positionnement, je trouve que ça avance pas très vite, et je me demande dans quelle mesure ton mod de page d'erreur n'en est pas la cause :

Code: Tout sélectionner

HTTP/1.1 302 Found
Date: Sat, 16 Sep 2006 17:16:54 GMT
Server: Apache
Location: http://www.micro-astuce.com/Forum/erreur
_404.html
Connection: close
Content-Type: text/html; charset=iso-8859-1

Il sort des 302 sur des 404, pas bon du tout ça. Les bots ne comprennent jamais que la page, n'existe pas, ils ne voient qu'une page qui concentre un max de lien différent, et ils n'aiment pas du tout.

Je te conseille de changer de méthode, du pure html ou un script plus carré.

++

[jcg11290]

Bonjour,

Par contre, en jetant un oeil à ton positionnement

Question idiote:
Comment fait-on pour "jeter un oeil à son positionnement". Je dois perdre un peu la mémoire.

Je suis un peu dans le même cas que Marie, ça avance très, très lentement.

J.Cl.

[dcz]

Et bien si déjà tu regarde combien de pages son listée et en cache dans les principaux moteurs des recherche, tu as la première couche d'info.
Après, le PageRank et sa transmission a des URL plus profondes
et les Backlinks.

Pour cela ici tu as :

Outils Webmaster

• Calcul du PageRank Google
  
• Calcul du Futur PageRank Google
• Calcul du nombre de Backlinks

Et bien en tendu les raports qui nous permettent de voir en peut de temps une impression d'ensemble.

Il est clair que ce faisant on ne parle toujours pas des mot clés cibles etc, mais c'est une chose que chacun doit savoir, quels sont les mots clés cible, quelle résultats de recherche y sont associé, et aussi, correspondent ils à des visites ?

++

[jcg11290]

Merci dcz,

Qques fois je devrais réfléchir avant de poser une question.. c'est ce que j'utilise..

Mais ça permettra ainsi de faire un petit rappel...

[Marie]

Bonjour à tous

Merci pour les réponses. Je me doutais un peu que Google n'indexait pas tout ce qui lui tombait sous le robot, mais je voulais en avoir confirmation.

Pour la page d'erreur personnalisée, ce n'est pas moi qui m'en suis occupée, c'est Landry (l'admin du site).

Pour l'installer, il a simplement rajouté dans .htaccess

Code: Tout sélectionner

ErrorDocument 404 http://www.micro-astuce.com/Forum/erreur_404.html

Suite à tes conseils, il a tout viré: la règle dans le .htaccess et la page erreur_404.html.
Que nous conseilles tu pour mettre en place une page d'erreur personnalisée?

Puis, pour ma culture générale ... Comment tu as fait pour avoir cette info?

Code: Tout sélectionner

HTTP/1.1 302 Found
Date: Sat, 16 Sep 2006 17:16:54 GMT
Server: Apache
Location: http://www.micro-astuce.com/Forum/erreur
_404.html
Connection: close
Content-Type: text/html; charset=iso-8859-1

@+

[dcz]

Alors c'est bizarre ça, une redirection ErrorDocument doit retourner le bon header. Essai avec juste :

Code: Tout sélectionner

ErrorDocument 404 /Forum/erreur_404.html

Pour voir.

Pour les header, il y a pas mal d'outils, dont celui de webrankinfo, très pratique

++

[landry]

Bonjour dcz.

Je viens alors d'appliquer ce que tu préconises.
J'attends de voir ce que tu en penses.

Merci à toi

[dcz]

Et bien là, c'est tout bon :

Code: Tout sélectionner

HTTP/1.1 404 Not Found
Date: Sun, 17 Sep 2006 15:21:36 GMT
Server: Apache
Connection: close
Content-Type: text/html

une 404 est bien une 404

++

[landry]

une 404 est bien une 404

Et dire que je roule en 205

Merci dcz.

[dcz]

Ahh ouais 205 ?

10.2.6 205 Reset Content

The server has fulfilled the request and the user agent SHOULD reset the document view which caused the request to be sent. This response is primarily intended to allow input for actions to take place via user input, followed by a clearing of the form in which the input is given so that the user can easily initiate another input action. The response MUST NOT include an entity.

http://www.w3.org/Protocols/rfc2616/rfc2616-sec10.html

Ce que j'en dit, tant que la 403 reste au garage

++

[landry]

Bonjour dcz.

Par contre je ne sais pas si nous te l'avons précisé et je ne sais pas si cela a de l'importance mais avant de créer notre propre .com nous nous sommes essayés chez forumactif.

Le forum portant le même nom et Google ayant référencé la page d'accueil du forum forumactif j'ai utilisé une redirection pour ramener les visiteurs vers le .com.

Voici la redirection utlisée :

Code: Tout sélectionner

document.location.replace("http://www.micro-astuce.com/Forum");

L'ancien forum redirigé

J'ai pensé que peut-être ce détail pouvait avoir son importance.

Landry

[dcz]

Ah bah le JS n'est pas suivit par les bots. Donc eux ne sont pas redirigés.

Met plutôt ça dans un fichier php que tu appellera index.php (tu peux aussi virer ou renommer les index.php et portal.php du site forumactif pour ne pas les perdre) :

Code: Tout sélectionner

<?php
$uri = ltrim($_SERVER['REQUEST_URI'], "/");
header("Status: 301 Moved Permanently", FALSE, 301);
header("Location: http://www.example.com/" . $uri );
exit();
?>

Remplace bien entendu www.example.com par ce que tu dois

++

[landry]

Ah, mais je ne peux pas faire ça. L'accés aux fichiers phpBB n'est pas possible chez forumactif.
Pas de serveur ftp possible.
A la limite si la redirection n'est pas prise en compte par Google c'est pas grave.
Ce dont je veux être certain c'est qu'au moins elle ne nuise pas au référencement du site.