Identifier les sous-domaines d'un site avec Google

Par Sébastien Billard, 11/10/2012 :: Référencement et moteurs :: #650 :: rss

Il est des cas où l'on est dans l'impossibilité d'avoir accès à la liste exhaustive des sous-domaines d'un site. Pourtant les connaitre est très utile, notamment pour s'assurer que le site ne propose pas de contenus dupliqué ou obsolètes. Hélas il n'existe pas de commande toute faite du coté des moteurs, et à ma connaissance aucun service en ligne ne propose de solution miracle. Aussi je vous propose la méthode empirique suivante, basée sur la commande "site:" de Google que l'on va combiner à divers opérateurs pour affiner progressivement les résultats. cette méthode est à personnaliser selon les cas : l'idée est de supprimer le maximum de résultats non souhaités. Attention, un sous-domaine inconnu de Google ne pourra pas être trouvé via cette méthode.

Le point de départ est de lister toutes les pages connues du domaine à l'exception du sous-domaine "www" qui est le sous-domaine par défaut de la majorité des sites. La commande est donc :

"site:exemple.fr -site:www.exemple.fr"

Le problème est que nous recherchons surtout les racines des sous-domaines et non pas toutes les URLs que Google connait. Nous allons donc filtrer les extensions de fichiers les plus communes :

"site:exemple.fr -site:www.exemple.fr -filetype:html -filetype:htm -filetype:php -filetype:asp -filetype:pdf -filetype:swf"

Un autre problème qui peut se poser est que certains sous-domaines peuvent retourner un grand nombre de résultats non-filtrables via les extensions de fichier. Dans ce cas il convient de les filtrer manuellement grâce à la commande "-site:" ce qui évitera de paginer à tout va :

"site:exemple.fr -site:www.exemple.fr -filetype:html -filetype:htm -filetype:php -filetype:asp -filetype:pdf -site:blog.exemple.fr"

Ah si seulement on pouvait requêter les moteurs à l'aide d'expressions régulières...

Commentaires

1. Le 11/10/2012, par Figurine de catch :: site

Merci pour ces commandes Google !

Très pratique, je me suis toujours demander comment obtenir seulement les catégories !

A plus ;)

2. Le 12/10/2012, par casque beats :: site

le duc François voulut l'en recompenser des pertes qu'il auoit receues

3. Le 12/10/2012, par Rédaction web :: site

Bonjour,
Merci pour cet article intéressant et explicite! J'en recherchai depuis longtemps déjà.
A bientôt

4. Le 13/10/2012, par Denis :: site

Deux remarques.

1. Toutes les urls pourraient ne pas être indexées par Google.

2. Un peu plus "bruyante" :
-> encrypted.google.com/sear... par exemple

Je souscris tout à fait à la dernière remarque ! ;+)

5. Le 14/10/2012, par location de voilier avec skipper :: site

Il existe quelques services externes de ce type :
www.webrankinfo.com/outil...
Bien sûr la liste n'est pas exhaustive et ce dernier est limité à quelques dizaines de ss domaines
@plus

6. Le 14/10/2012, par West Valley High :: site

Heureux de voir ce blog a nouveau actif, après 4 mois d'interruption ! ;-)

7. Le 15/10/2012, par Maximilien :: site

Très intéressant comme analyse et comme astuce, je n'y avais pas penser ! Merci Sébastien pour le partage de cette découverte.

8. Le 15/10/2012, par Jérôme :: site

Ca faisait longtemps qu'on avait pas eu le droit à un article sur ce blog mais il a le mérite d'être très intéressant ! Merci :)

9. Le 15/10/2012, par Vincent :: site

Bonjour Sebastien, merci pour cette astuce, je n'y aura pas pensé dans ce sens ! Ca pourrait bien m'être utile pour trouver quelques bons plans BL sur des grosses plateformes de blogs.

10. Le 17/10/2012, par Jean-Marc :: site

C'est en effet une très bonne astuce qu'il fallait trouver ! Elle pourra m'être bien utile pour trouver les sous-domaines de mes clients.

11. Le 17/10/2012, par rédaction web :: site

Article très intéressant!
Merci de nous avoir montré l'importance de connaître les sous-domaines d'un site qui est parfois négligé par les référenceurs!

12. Le 17/10/2012, par conjugaison identifier :: site

C'est vrai que parfois connaitre tous les sous-domaines peut s'avérer fort utile, je vais aller tester cette technique pour voir ça de plus près.

13. Le 17/10/2012, par Marc :: site

Il est parfois difficile de tout filtrer, l'outil de webrankinfo aide bien tout de même, mais merci pour ces commandes.

14. Le 17/10/2012, par Marion :: site

Des commandes bien pratiques pour vérifier le DC d'un site. Cela va bien me servir !

15. Le 18/10/2012, par coque iphone 5 :: site

super ça peut être bien pratique tout ca !

16. Le 19/10/2012, par Marco :: site

Merci pour les commandes, c'est bien vu !
Sinon, en solution alternative, il existe des moyens d'extraire les résultats Google (script PHP, plugin firefox), ainsi comme ca c'est simple en seconde étape de faire joujou avec des expressions régulières.

17. Le 20/10/2012, par Stéphane :: site

Merci pour ces explications très pratique.

18. Le 22/10/2012, par jeu jardinier :: site

Ces techniques sont top pour vérifier l'ensemble des contenus, je vais les appliquer systématiquement maintenant!

19. Le 23/10/2012, par doudoune canada goose :: site

merci pour cette astuce..

20. Le 26/10/2012, par coloriage harry potter :: site

Content de lire un nouvel article sur ce blog, en plus toujours avec des astuces très intéressantes :-)

21. Le 26/10/2012, par Agence referencement Marseille :: site

Bonjour Sebastien,

Merci pour ce nouveau post contenant de bonnes astuces pour éviter le DC. Je vais le placer en favoris ^^

22. Le 26/10/2012, par Sylvain :: site

Astuce sympathique ! Finalement, c'est fou ce qu'on peut faire avec Google... Google donne les armes aux SEO qu'il combat :)

23. Le 30/10/2012, par liste de jeux :: site

Voilà qui me facilitera la tâche grandement, il y a toujours de bons conseils sur ce blog, c'est ça qui me plait!

24. Le 30/10/2012, par Xav :: site

Merci pour l'astuce, je vais tester cela et vous faire un retour ! A plus ,)

25. Le 30/10/2012, par Yann :: site

Et cela se corse si le site principal utilise la racine en redirigeant les www... Ce qui devient très courant pour avoir les url les plus courtes possible. En effet, avoir des url courtes possède des avantages non-négligeables pour éviter les 404, avoir une communication la plus claire et favoriser les BL naturels.

26. Le 31/10/2012, par trampoline :: site

Je n'y avait pas pensé non plus, c'est pratique.
Merci pour la rédaction de cet article.
Je le recommanderai.

27. Le 31/10/2012, par Jérôme :: site

sympa l'astuce, je n'y avais pas pensé. Combiné à un scraper et à excel je pense que cette peut aller assez vite quand même

28. Le 1/11/2012, par Tony :: site

L'astuce est pratique pour éviter le duplicate content. Pour pouvoir faire des expressions régulières sur Google, rien de mieux que de travailler chez Google. :)

29. Le 3/11/2012, par jeu skate :: site

Pour l'avoir testée, cette astuce est diablement efficace, un vrai bonheur pour identifier les sous-domaines :D

30. Le 5/11/2012, par Julien :: site

Excellente idée, je ne connaissais pas du tout :)

31. Le 5/11/2012, par agence évènementielle Paris :: site

Voilà une belle formule mathématique pour la chasse au duplicate content. Propre et pratique.

32. Le 6/11/2012, par 3S :: site

Voila qui va aider :)

33. Le 6/11/2012, par 3S :: site

A n'en pas douter !

34. Le 7/11/2012, par Pierre :: site

Merci pour l'info, plutôt utile ! A+

35. Le 7/11/2012, par Franck :: site

Simple d'execution, merci pour le conseil ;)

36. Le 8/11/2012, par table de billard ronde :: site

C'est vraiment parfait cette technique, je vais l'utiliser de ce pas!

37. Le 8/11/2012, par Trampoline :: site

C'est vrai que je n'y avait pas pensé non plus, merci de nous aider pour cela.
Je vais en profiter rapidement.
Bonne continuation.

38. Le 8/11/2012, par videosurveillance :: site

Salut,
vraiment très belle publication merci bien pour la partage de tel information ^__^

39. Le 11/11/2012, par Sylvain :: site

C'est en effet une excellente astuce qui permet d'auditer plus rapidement le site d'un client. Cela peut egalement être une astuce pratique pour trouver de nouveaux spots de backlinks.

40. Le 12/11/2012, par joueurs de foot :: site

Cela faisait un bout de temps que je me demandais comment faire, bien heureux de découvrir la réponse ici :-)

41. Le 13/11/2012, par Naturopathie :: site

Encore faut-il que les sous domaines soient correctement indexés...
Mais, en fait il est plus difficile de cacher une page à google que de la faire indexer.

42. Le 15/11/2012, par paul :: site

Merci pour l'article,assez pertinent, à tester !

43. Le 17/11/2012, par JulienC :: site

Pour un site qui serait hébergé sur un serveur dédié et/ou avec une IP unique, je fais un ip:IP-SITE dans bing et ça permet d'avoir quelques host :)

44. Le 17/11/2012, par Mac :: site

Je ne savais pas qu'on pouvais supprimer des résultats avec le signe moins, c'est génial je vais pouvoir affiner mes recherches, merci !

45. Le 18/11/2012, par Chris :: site

Merci pour ces informations bien pratiques, je vais de ce pas les appliquer ;)

46. Le 26/11/2012, par Mathias @PrestatairesWeb :: site

J'ai proposé une fonctionnalité de ce type chez DuckDuckGo, sans grand succès pour l'instant. duck.co/topic/display-mod...

47. Le 28/11/2012, par xyz :: site

Merci !

48. Le 3/12/2012, par Trampoline pas cher :: site

Merci pour l'article bien rédigé et qui nous éclaire sur pas mal de point peu regardé sur le net. Et surtout dans le domaine du référencement.

49. Le 7/12/2012, par pince bijoux :: site

Merci pour ces petites astuces qui permettent de profiter pleinnement de la puissance de Google ! Il fallait les connaître :)

50. Le 13/12/2012, par référencement site internet :: site

L'importance du sous-domaine est-il équivalent à celui du domaine pour Google?

51. Le 13/12/2012, par référencement site internet :: site

L'importance du sous-domaine est-il équivalent à celui du domaine pour Google?

52. Le 14/12/2012, par référencement site internet :: site

Très intéressant comme article et conseils ! C’est bien détaillé et surtout explicite.
Un grand merci pour l’auteur de cet article.

Ajouter un commentaire

Les commentaires pour ce billet sont fermés.

Référencement, Design et Cie