Una araña de la web es un programa que inspecciona las páginas de la Word Wide Web de forma automática. Uno de los usos más frecuentes que se les da consiste en crear una copia de las páginas web visitadas, para que así el procesador de búsqueda sea más rápido.
¿Cómo funcionan?
Las arañas web suelen ser bots. Todo comienza cuando visitan una lista de URL's, identifica los hiperenlaces en ciertas páginas y las añade a la lista de URL's a visitar
No hay comentarios:
Publicar un comentario