Crear un rastreador – Yext Help

Un rastreador web es un conector de datos que ayuda a extraer el contenido HTML de las páginas web. Una vez que el rastreo se ha ejecutado correctamente en un conjunto de páginas web, el flujo Añadir datos ayuda a convertir ese contenido HTML sin procesar en entidades en Knowledge Graph. En este artículo se explica cómo crear un rastreador.

Antes de configurar un rastreador para tu página web, necesitarás asegurarte de que el rastreador de Yext está en la lista para poder acceder a tus páginas web. Te recomendamos añadir las direcciones IP y de agente de usuario de nuestro rastreador.

Agente de usuario

El rastreador de Yext utiliza el siguiente agente de usuario:

Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/87.0.4280.88 YextBot/Java Safari/537.36

El rastreador de Yext utiliza las siguientes direcciones IP:

54.204.19.87
50.19.160.200
34.198.218.97
54.221.171.225

Para crear un rastreador:

Haz clic en Knowledge Graph en la barra de navegación y haz clic en Entidades.
Haz clic en Rastreadores.
Haz clic en el botón + Rastreador nuevo.
Introduce un nombre para el rastreador.
Haz clic en Semanal y selecciona la frecuencia con la que quieres que se ejecute el rastreador: una vez, diariamente o semanalmente.
Haz clic en Subpáginas y selecciona tu estrategia de rastreo.
- Tu estrategia de rastreo es donde indicas si quieres rastrear todas las páginas, las subpáginas o solo páginas específicas.
Selecciona los tipos de archivo que el rastreador debe rastrear.
Introduce las páginas o dominios que deseas rastrear. Para añadir más páginas o dominios, haz clic en el enlace + Añadir otro.
- Ten en cuenta que se rastrearán los dominios y las páginas vinculadas a un mismo dominio.
(Opcional) Agrega los dominios que te gustaría excluir del rastreo.
(Opcional) Especifica el límite de la tasa o la profundidad máxima para el rastreador.
Una vez que guardes tu rastreador, se te redirigirá a la página Rastreadores. Para ver los detalles del rastreador que acabas de crear, haz clic en el botón Ver detalles.