Décrire ce qu'est un robot d'exploration Web
 Un robot d'indexation, également connu sous le nom d'araignée, est un programme qui visite automatiquement les sites Web et collecte des informations sur le contenu qui s'y trouve. Il parcourt le contenu d'une page, suit des liens vers d'autres pages, afin de collecter des informations sur une variété de sujets. Les données recueillies sont ensuite utilisées par les moteurs de recherche, les fournisseurs de contenu et d'autres applications.