Commentaires sur : Sites web : les fichiers robots.txt avantagent Google

Par : Johan

Johan — Tue, 20 Nov 2007 19:54:25 +0000

Vous ne parlez que de Google, mais vous dites en plein milieu de l’article « Selon les chercheurs, ces fichiers offrent un accès à Google, Yahoo et MSN mais limitent l

Par : Johan

Johan — Tue, 20 Nov 2007 19:54:23 +0000

Vous ne parlez que de Google, mais vous dites en plein milieu de l’article « Selon les chercheurs, ces fichiers offrent un accès à Google, Yahoo et MSN mais limitent l

Par : eric clairet

eric clairet — Tue, 20 Nov 2007 10:33:10 +0000

On pourrait croire qu’un fichier robot.txt amène à être mieux classé sur Google alors qu’en fait on voit que les webmaster choisissent de favoriser le passage du spider de google sur leur site et filtrent les spiders des moteurs à la popularité anecdotique. Quelle conclusion en tirer ? Que Google représente une part de marché si importante qu’on doit lui dérouler le tapis rouge ? Oui, certainement. Reste à évoquer le respect de ce fichier robots.txt par les spiders. C’est une autre histoire.