All The Web est l'un des derniers moteurs à s'être installé dans la course à la recherche d'information en texte intégral. Il a été mis en place par deux sociétés, le norvégien FAST et le très connu
constructeur américain de PC Dell en mai 1999. L'initiative est ambitieuse : le moteur de recherche a annoncé d'entrée un index de 80 millions de pages. En septembre 99, le chiffre de 210 millions de pages était
avancé. La course au plus gros index se fait entre quelques challengers : Altavista, All The Web, Northern Light, Inktomi et Google. Quand l'un annonce une augmentation du nombre de pages indexées,
l'autre affiche immédiatement de son côté quelques millions de plus. Il n'y a aucune raison pour que cela s'arrête... En fait, il y a encore de la marge pour les moteurs, car All The Web semble
n'indexer qu'un tiers des pages Web disponibles ! FAST dit cependant que ce chiffre est de toutes façons faux, de très nombreuses pages Web étant dupliquées et identiques les unes aux autres, et que la taille
réelle du Web serait plus proche de celle de son index. Why not ? All The Web aura cependant du chemin à faire avant d'atteindre l'exactitude de son slogan ("All the Web, all the time"),
mais l'outil semble ambitieux et plein d'enthousiasme. La technologie de recherche d'information est fournie par FAST, les machines sont des serveurs... Dell, bien entendu et le système d'exploitation utilisé est
Free BSD. Fin 99, All The Web a évolué en proposant une recherche avancée (recherche linguistique, recherches sur le titre et l'énoncé de l'URL, etc.) comme tous ses concurrents. Puis, le portail
Lycos a investi dans 15% des actions de la société FAST, ce qui pourrait garantir à cette dernière une solidité financière dont elle aura peut-être besoin dans les mois qui viennent. All The Web fournit
d'ailleurs déjà les résultats lors d'une interrogation sur la zone de recherche avancée du moteur Lycos. Même si l'on peut regretter le langage et les annonces commercialement agressifs qui ont
accompagné le lancement de ce nouveau moteur (ce qui induit à se poser quelques questions sur la validité des informations avancées...), force est de constater qu'il sera certainement un futur grand de la
recherche d'information.
|