À propos

Le Crawler est un programme automatisé de collecte de données sur le web. Lorsqu'on lui fournit un ensemble d'URL de départ, il visite ces pages et en extrait le contenu. Il visite ensuite les URL vers lesquelles ces pages renvoient, et le processus se répète pour toutes les pages liées. Avec peu de configuration, le Crawler peut remplir et maintenir les index Algolia pour vous en extrayant périodiquement le contenu de vos pages web.

• Regroupe rapidement votre contenu dispersé.
• Met à jour automatiquement et périodiquement votre contenu agrégé.
• Vous permet de rechercher rapidement et précisément dans vos dossiers (et d'offrir cette même expérience de recherche à vos clients).