Outils de recherche et référencement

J'ai 202.165 en plus, mais c'est vrai que slurp est un vrai cauchemard pour les cloakers tant il  est fertile en nouvelles IPs.

Ceci dit, tous ces bots n'ont visiblement pas la même fonction. La majorité des pages de mes sites en cache de yahoo sont les résultats du crawl de 68.142.

Donc si tu as des pages qui n'ont été crawlées que par d'autres slurps que 68.142, il est peut-être normal que yahoo ne les connaisse pas encore officiellement (par la commande site:)

Pour ce qui est des pénalités de yahoo: je me suis fait gauler de nombreuses fois par slurp en flagrant délit de cloak. A chaque fois je crois avoir rectifié le tir assez vite (3 jours). Dans de nombreux cas, j'ai constaté que suite à ces flagrants délits, la page "coupable" plongeait dans le classement de yahoo (sans toutefois en disparaitre complètement) à la "yahoo dance" suivante (c'est arrivé à mon sorcier glouton). En revanche, la bonne nouvelle est qu'à la yahoo dance suivant la prise en compte de la nouvelle IP du bot dans mon cloak (environ 1 mois plus tard), elle reprenait sa place d'origine.

salemioche a �crit:

je me mail quand l'UA correspond pas a l'IP supposée

J'ai un système équivalent. Ca me permet aussi de constater que firefox aidant, de plus en plus de simples mortels se baladent sous l'identité de Googlebot

Sur un site j'ai aussi un robots.php en guise de robots.txt. Ca me permet de logguer systématiquement tous les bots.

je viens d'etre crawlé par : 72.30.177.16
avec l'UA de yahoo mais
http://www.dnsstuff.com/tools/ptr.ch?ip=72.30.177.16

il est pas content ?!!!

une idée ?

moi c'etait a 6:07 pour etre exact ?

une petite classe C a gater en plus a ton avis ?