Crawlers

Autor: Mabel Cansado

Software o webbots que se encargan de recorrer los enlaces de las páginas webs de forma automática y sistemática para procesarlas. También se conocen como arañas web, rastreadores o indexadores.