Informazioni su

Il Crawler è un programma automatizzato per il web scraping. Una volta fornita una serie di URL di partenza, visita tali pagine ed estrae i contenuti. Successivamente visita gli URL a cui queste pagine rimandano, e il processo si ripete per tutte le pagine collegate. Con una configurazione minima, il Crawler può popolare e mantenere gli indici di Algolia per conto tuo, estraendo periodicamente i contenuti dalle tue pagine web.

• Aggrega rapidamente i tuoi contenuti distribuiti.
• Aggiorna automaticamente e periodicamente i tuoi contenuti aggregati.
• Consente di effettuare ricerche rapide e precise nei propri archivi (e di offrire la stessa esperienza di ricerca ai propri clienti).