Yahoo visite obstinément posting.php

Discussion sur les autres moteurs de recherche ...

Modérateur: Modérateurs

Yahoo visite obstinément posting.php

Messagede falkra » Mer Mar 14, 2007 10:57 am

Bonjour,

je tourne sous phpbb, et le bot de yahoo continue de parcourir la page posting.php, malgré ceci dans robots.txt (extrait)

Code: Tout sélectionner
User-agent: *
Disallow: /phpBB2/posting.php


J'ai essayé avec posting.php? : idem, yahoo (et lui seul) continue, du coup dans le module "qui est en ligne", on voit "poste un message", alros que les invités ne postent pas.
Bien sûr aucun mal n'est fait, et cela peut paraitre cosmétique, mais ça m'agace, car google a bien compris les instructions, pourquoi pas yahoo ?

Cela fait bien longtemps que ces lignes sont en place, donc le fichier a été lu et relu par yahoo.
Avatar de l’utilisateur
falkra
PR3
PR3
 
Messages: 373
Inscription: Dim Mar 11, 2007 12:11 am

Publicité

Messagede dcz » Mer Mar 14, 2007 12:50 pm

Yahoo! est très lent à la détente avec les robots.txt. Et on peu pas y faire grande chose.

Il suit bien les directives qu'il trouve en tout premier lieux lors de la découverte d'un site, mais il met plus de temps que Google, a qui ça prends du temps aussi, pour prendre en compte de nouvelles interdictions, qui concernent des pages déjà indexées.

De manière générale Yahoo est moins fin que Google sur le crawl, c'est de loin le bot qui utilise le plus d'ip en même temps pour crawler, qui charge le plus de page dans un laps de temps rapproché, bref, le plus bourrin, mais on l'aime bien quand même :lol:

++
Useful links :
SEO Forum || SEO Directory || SEO phpBB || Search
____________________

Liens Utiles :
Forum référencement || Annuaire référencement || Référencement phpBB || Recherche
dcz
Admin
Admin
 
Messages: 21428
Inscription: Ven Avr 28, 2006 9:03 pm

Messagede falkra » Mer Mar 14, 2007 4:38 pm

D'accord, mais il est vraiment lent à la détente l'animal, et c'est vrai que pour les IP, il n'y va pas par quatre chemins. :lol:

Est-ce que Disallow: "/dossierduforum/posting.php" suffit ou il faut "posting.php?" (parce que le temps qu'il comprenne, si je ne mets pas le bon...).
Avatar de l’utilisateur
falkra
PR3
PR3
 
Messages: 373
Inscription: Dim Mar 11, 2007 12:11 am

Messagede rogerlebouledogue » Jeu Mar 15, 2007 7:39 am

Normalement un simple :
Code: Tout sélectionner
User-agent: *
Disallow: /dossierduforum/posting

suffit, car cela voudra dire (pour un bon moteur de recherche ... :lol: ) que toutes les pages commençant par "/dossierduforum/posting" sont a ne pas retenir pour leur bases de recherche ;)

@+. :P
Avatar de l’utilisateur
rogerlebouledogue
phpBB SEO Team
phpBB SEO Team
 
Messages: 360
Inscription: Sam Juil 22, 2006 1:20 pm
Localisation: Belle-Ile (56)

Messagede falkra » Mer Mar 21, 2007 5:07 pm

Merci. :D

Je vais l'entrer comme ça.
Avatar de l’utilisateur
falkra
PR3
PR3
 
Messages: 373
Inscription: Dim Mar 11, 2007 12:11 am


Retourner vers Autres Moteurs de Recherche

 


  • Articles en relation
    Réponses
    Vus
    Dernier message

Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 1 invité