Le Web est une entité incroyablement énorme, complexe et en expansion constante. C'est pourquoi il n'est pas possible pour un outil - un moteur de recherche - d'indexer, de gérer et de récupérer tout le contenu du Web à tout moment.
Bien qu'il existe des milliards de pages Web indexées par les moteurs de recherche, aucune de ces bases de données ne contient un journal de l'intégralité du Web, et encore moins de l'ensemble de l'internet.
Ce que les moteurs de recherche ne voient pas
Voici plusieurs exemples de ce qu'un moteur de recherche n'indexe pas:
- Le Web invisible est un vaste référentiel d'informations que la plupart des moteurs de recherche n'indexent pas.
- Les réseaux privés, appelés intranets, ne sont pas connectés à Internet et ne sont donc pas détectés par les moteurs de recherche. Ceci est également vrai pour les fichiers locaux que vous ouvrez avec votre navigateur Web; un moteur de recherche public ne peut voir ces fichiers locaux que s'ils existent sur un serveur Web.
- Des formulaires tels que ColdFusion ou CGI ne sont pas indexés par les moteurs de recherche.
- Les sites Web protégés par mot de passe, comme la bibliothèque d'une université ou le contenu nécessitant des abonnements payants, ne sont pas disponibles via un moteur de recherche.
- Les sites Web peuvent délibérément faire en sorte qu'une page ne soit pas indexée par les moteurs de recherche afin qu'elle ne soit pas trouvée lorsque quelqu'un recherche ce contenu.
Y aura-t-il un moteur de recherche qui trouve tout?
À en juger par la croissance exponentielle du Web jour après jour, semaine après semaine et année après année, les chances sont contre.
C'est l'une des raisons pour lesquelles les chercheurs experts ont tendance à ne pas s'appuyer sur un seul moteur de recherche pour leurs besoins de recherche Web; Un moteur de recherche ne peut pas offrir la meilleure expérience de recherche sur le Web que beaucoup de personnes ne réalisent même pas qu’elles sont en train de rater.
Il est judicieux de diversifier vos flux de recherche Web. Voici quelques ressources qui peuvent vous aider à résoudre ce problème:
- La liste des moteurs de recherche ultimes: une liste de moteurs de recherche allant du plus général au plus créneau que vous pouvez utiliser comme point de départ pour votre exploration Web.
- Comment choisir le bon moteur de recherche pour vos besoins: Cochez cette case si vous ne savez pas quel moteur de recherche vous avez besoin pour trouver ce que vous cherchez.
- Comment fonctionnent les moteurs de recherche: Que savez-vous vraiment des moteurs de recherche? Probablement plus que vous ne le pensez!
Comment limiter ce que vous voyez avec un moteur de recherche
Il existe des cas où vous pouvez définir le type de résultats que le moteur de recherche vous donnera, vous permettant de limiter vous voir des résultats.
Ce type de filtrage utilise ce qu'on appelle des "opérateurs de recherche" pour affiner instantanément les milliards de résultats potentiels extraits d'un moteur de recherche. Avec Google Search, par exemple, vous pouvez rechercher dans des sites Web particuliers uniquement, rechercher certaines expressions et même rechercher des types de fichiers particuliers.
Consultez ces raccourcis de recherche Google avancés pour plus d'informations sur l'utilisation des opérateurs de recherche pour affiner vos recherches sur le Web Google.
