El rastreador de Data Enricher

¿Ves DataEnricher en tus registros? Aquí te explicamos quiénes somos, qué hace nuestro rastreador y cómo puedes limitarlo o bloquearlo.

Qué hace

Data Enricher ayuda a las tiendas online a completar su información de productos. Cuando una tienda pregunta por un producto (un EAN o un nombre de producto), buscamos en la web y leemos algunas páginas públicas de productos para encontrar datos como especificaciones y dimensiones. No copiamos tus textos: la IA escribe textos nuevos basados en los datos.

Cómo se comporta

  • Sigue robots.txt, incluidas las reglas Disallow, Crawl-delay y Request-rate.
  • Solo lee páginas públicas de productos que un buscador muestra para un solo productó, nunca sitios web enteros, y nunca inicia sesión, rellena formularios ni realiza pedidos.
  • Lee como máximo unas pocas páginas por sitio a la vez, con un límite fijo por sitio por minuto.
  • Un sitio que responde con 403, 429 o una comprobación de bots se deja en paz durante horas, y tras unas cuantas veces, para siempre.
  • Los productos encontrados anteriormente se obtienen de nuestra propia caché, por lo que la misma página no se lee una y otra vez.

Cómo reconocerlo

El rastreador siempre dice quién es y nunca se hace pasar por un navegador.

  • User-Agent: DataEnricher/1.0 (+https://data-enricher.com/en/bot)
  • From: info@mark-app.com
  • Direcciones IP: 188.245.8.38, 2a01:4f8:c014:25c4::1
  • Reverse DNS: crawler.data-enricher.com

Limitarlo o bloquearlo

¿Quieres bloquear el rastreador para todo tu sitio? Añade esto a tu robots.txt:

User-agent: DataEnricher
Disallow: /

O solicita más tiempo entre dos páginas (en segundos):

User-agent: DataEnricher
Crawl-delay: 10

Preguntas o problemas

¿Algo no va bien o quieres que evitemos (una parte de) tu sitio? Escríbenos y lo solucionaremos rápidamente: info@mark-app.com