Robot d’indexation

Les robots d’indexation extraient les données (URL, titre, mots-clés sous forme de chaînes de caractères, etc.) des pages parcourues par les robots d’exploration (crawlers en anglais), analysent le contenu de l’information, puis la classent pour former l’index de la base de données des moteurs de recherche.