El término “enumerador” a menudo se confunde con agentes inteligentes, usuarios o autónomos, “hormigas” o “gusanos”. Existen diferencias significativas solo en comparación con los agentes, otras definiciones indican tipos similares de Robots colaborativos
Por tanto, los agentes pueden ser:
Intelectual : programas que se mueven de un lugar a otro, decidiendo independientemente cómo proceder; no se utiliza mucho en Internet;
Autónomos : estos agentes ayudan al usuario a seleccionar productos, buscar o completar formularios, estos son los llamados filtros que no tienen mucho que ver con los programas de la red;
Personalizado : los programas facilitan la interacción del usuario con la World Wide Web, como navegadores (por ejemplo, Opera, IE, Google Chrome, Firefox), mensajería instantánea (Viber, Telegram) o programas de correo (MS Outlook o Qualcomm).
Las hormigas y los gusanos se parecen más a las arañas de búsqueda. Los primeros forman una red entre sí y se comunican sin problemas como una colonia de hormigas real, mientras que los “gusanos” son capaces de autorreproducirse; de lo contrario, actúan de la misma manera que un robot de búsqueda estándar.
Varios robots de búsqueda
Hay muchos tipos de robots de búsqueda. Dependiendo del propósito del programa, estos son:
Espejo: vea sitios web duplicados.
Dispositivos móviles: segmenta versiones móviles de páginas web.
Actúan con rapidez: registran inmediatamente nueva información y buscan las últimas actualizaciones.
Por referencia: indexan enlaces, cuentan su número.
Indexadores de diferentes tipos de contenido: programas separados para texto, audio y video, imágenes.
“Spyware”: busca páginas que aún no se muestran en el navegador.
“Pájaros carpinteros”: visitan sitios de vez en cuando para comprobar su relevancia y eficacia.
Los principales robots de los motores de búsqueda
También hay robots de motores de búsqueda individuales. En teoría, su funcionalidad puede variar significativamente, pero en la práctica los programas son casi idénticos. Las principales diferencias entre el rastreo de páginas de Internet utilizando los dos navegadores principales son las siguientes:
Severidad de la verificación. Se cree que el robot del motor de búsqueda “Yandex” evalúa el sitio web de manera algo más estricta de acuerdo con los estándares de la World Wide Web.
Mantener la integridad del sitio. El motor de búsqueda de Google rastrea todo el sitio web (incluido el contenido multimedia), mientras que Yandex puede navegar por las páginas de forma selectiva.
Velocidad de verificación de página nueva. Google agrega un nuevo recurso a los resultados de búsqueda en unos pocos días; en el caso de Yandex, el proceso puede demorar dos semanas o más.
Frecuencia de reindexación. Yandex Search Robot busca actualizaciones varias veces a la semana y Google, una vez cada 14 días.
