Qué hace
Data Enricher ayuda a las tiendas online a completar su información de productos. Cuando una tienda pregunta por un producto (un EAN o un nombre de producto), buscamos en la web y leemos algunas páginas públicas de productos para encontrar datos como especificaciones y dimensiones. No copiamos tus textos: la IA escribe textos nuevos basados en los datos.
Cómo se comporta
- Sigue robots.txt, incluidas las reglas Disallow, Crawl-delay y Request-rate.
- Solo lee páginas públicas de productos que un buscador muestra para un solo productó, nunca sitios web enteros, y nunca inicia sesión, rellena formularios ni realiza pedidos.
- Lee como máximo unas pocas páginas por sitio a la vez, con un límite fijo por sitio por minuto.
- Un sitio que responde con 403, 429 o una comprobación de bots se deja en paz durante horas, y tras unas cuantas veces, para siempre.
- Los productos encontrados anteriormente se obtienen de nuestra propia caché, por lo que la misma página no se lee una y otra vez.
Cómo reconocerlo
El rastreador siempre dice quién es y nunca se hace pasar por un navegador.
- User-Agent:
DataEnricher/1.0 (+https://data-enricher.com/en/bot) - From:
info@mark-app.com - Direcciones IP:
188.245.8.38,2a01:4f8:c014:25c4::1 - Reverse DNS:
crawler.data-enricher.com
Limitarlo o bloquearlo
¿Quieres bloquear el rastreador para todo tu sitio? Añade esto a tu robots.txt:
User-agent: DataEnricher
Disallow: /
O solicita más tiempo entre dos páginas (en segundos):
User-agent: DataEnricher
Crawl-delay: 10
Preguntas o problemas
¿Algo no va bien o quieres que evitemos (una parte de) tu sitio? Escríbenos y lo solucionaremos rápidamente: info@mark-app.com