Voir le web comme un robot avec Firefox et la barre Web Developer

Plusieurs outils permettent de simuler approximativement la vision des robots d'indexation, par exemple Spider Simulator. Ce type d'application présente des avantages : elles sont accessibles en ligne et faciles à utiliser. Mais elles ne permettent pas de tester une page off-line, ni de naviguer facilement de lien en lien.

Voici donc une méthode basée sur l'extension Web Developer de Chris Pederick qui permet de simuler à peu près correctement la vision d'un robot d'indexation (les clips Flash restent cependant visibles, l'extension ne permettant pas de désactiver Flash actuellement) :

Les moteurs n'interprêtent pas javascript, ni les applets java : activez dans le menu Disable les options "disable java" et "disable javascript".
Les moteurs n'acceptent pas les cookies : activez dans le menu Cookies l'option "disable cookies | allcookies".
Les moteurs ignorent les couleurs des pages ainsi que les feuilles de style : activez dans le menu Disable l'option "disable page colors", puis l'option "disable styles | all styles" dans le menu CSS.
Les moteurs ne savent pas lire les images, mais tiennent compte des attribut alt : supprimez l'affichage des images en activant l'option "disable images | all images" dans le menu Images et activez l'option "replace images with alt attributes" dans le même menu.
Les moteurs lisent le contenu dans l'ordre du code : activez donc l'option "linearize page" dans le menu Miscellanous.

Surtout, n'oubliez pas pas d'activer l'option "persist style" dans le menu "options" afin de conservez ces paramètres lors de votre navigation ;)

Commentaires

1. Le 17/11/2006, par Loup jov :: site

Voilà qui va être bien pratique. Merci Seb. Je m'en vais l'essayer de suite...

2. Le 17/11/2006, par Sébastien Billard :: site

Waou ! Tu commentes plus vite que ton ombre :D

3. Le 17/11/2006, par Loup jov :: site

c'est que je suis au taquet moi M'sieur :)

4. Le 17/11/2006, par Don Diego

Merci. Ce qui est dommage, c'est que cette super extension ne permet pas d'enregistrer des configurations. On pourrait alors le faire pour celle-ci et l'appeler "robots" par exemple.

5. Le 17/11/2006, par Sébastien Billard :: site

Effectivement Don Diego, mais j'ai une idée à ce sujet, faut que je prenne un peu de temps pour la réaliser ;)

6. Le 20/11/2006, par Phil. :: site

J'aime bien ce site www.seo-browser.com pour naviguer avec la "robots touch". NB : le mode advanced (option en haut à droite) est plus efficace ;)

7. Le 21/11/2006, par kmenslow :: site

Merci pour ce bon lien Phil.

8. Le 21/11/2006, par Sébastien Billard :: site

Effectivement, cet outil est sympathique Phil, merci ;)

9. Le 23/11/2006, par Jerome :: site

Sinon, pour faire plus simple, il y a le copier/coller dans un éditeur texte :)

CTRL+A CTRL+C ALT+TAB CTRL+V

Jerome

10. Le 23/11/2006, par Sébastien Billard :: site

Jerome : C'est une méthode effectivement très rapide pour analyser une page, je n'y avais pas pensé :) Les attributs alt sont cependants ignorés, alors qu'ils sont bien lus par les moteurs, et la méthode ne permets pas de différencier les titres <hn>, listes et emphases. on perd également les liens. Mais pour linéariser et filtrer le seul contenu texte, c'est génial.

11. Le 23/11/2006, par Jerome :: site

@Sébastien: oui, les titres et emphases sont ramenés à du texte. Par contre, avec firefox (et kate, sous linux), les listes et les 'alt' sont bien repris.

En tout cas ça donne une bonne idée de ce que 'voit' un client texte. Ca n'empêche pas que la webdevbar soit l'outil de développement le plus fabuleux :) Et que des profils seraient bienvenus, comme cela est dit à la suite de ton billet, pour l'adapter aux différentes phases de développement.

Jerome

12. Le 23/11/2006, par Sébastien Billard :: site

Ah oui tiens, utilisant surtout IE au quotidien je n'avais jamais remarqué que FF copiait les attributs alt, merci :)

Sinon on peut aussi signaler que Lynx peut donner un bon aperçu de la vision d'un moteur. Une version pas mal est disponible ici : csant.info/lynx.htm

13. Le 25/11/2006, par Jean :: site

Excellent ! Mais le truc qui me manque vraiment beaucoup c'est la possibilité de désactiver Flash. Les clients sont obnubilés par le miroir aux alouettes des mignons machins qui bougent et ne comprennent pas qu'un menu en flash bloque l'indexation de leur site…

14. Le 29/11/2006, par Your_End_Is_Near_lol :: site

Bonjour ,

et merci pour cet article , mais Lynx l'aurait fait on et off-line ;) ( d'après cet article : seofriends.info/visiteur-... ) .

15. Le 3/12/2006, par Sébastien Billard :: site

Effectivement Your_End_Is_Near_lol, Lynx est très bien également. En fait il existe au moins une dizaine de méthodes, chacune avec ses avantages et inconvénient (Lynx reste un peu pénible à utiliser, et les titres <hn> n'ont pas de rendu spécifique il me semble du fait de l'interface "DOS")

16. Le 5/12/2006, par Lord_Coder :: site

Bonjour ,

Jean > Il y a une extension pour firefox permettant de bloquer les animations Flash ;) : addons.mozilla.org/firefo... .

Sebastien > Oui t'as raison , c'est plutôt réservé aux Linuxiens ^^ , mais Lynx a une particularité que Webdevelopper n'aura jamais , il peut lister ( bah comme les voient les robots ) les link rel ( comme les liens des archives des blogs ... ) .

PS : c'est moi Your_End_Is_Near_lol :p

17. Le 5/12/2006, par Sébastien Billard :: site

Lord_Coder : Lynx est multi-plateformes, voici une version Windows que je trouve pas mal : csant.info/lynx.htm

Il voit effectivement les liens link rel, mais ceux-ci ne sont pas pris en compte par la plupart des moteurs (si ce n'est tous) : s.billard.free.fr/referen...

Ajouter un commentaire

Les commentaires pour ce billet sont fermés.

Référencement, Design et Cie