Data Enricher -selainbotti

Näkyykö DataEnricher lokeissasi? Täältä löydät tiedot meistä, bottimme toiminnasta ja ohjeet sen rajoittamiseen tai estämiseen.

Mitä se tekee

Data Enricher auttaa verkkokauppoja täydentämään tuotetietojaan. Kun verkkokauppa hakee tuotetta (EAN-koodilla tai tuotenelmällä), etsimme verkosta ja luemme muutaman julkisen tuotesivun löytääksemme tiedot, kuten tekniset tiedot ja mitat. Emme kopioi tekstejäsi: tekoäly kirjoittaa uudet tekstit tosiasioiden pohjalta.

Miten se toimii

  • Se noudattaa robots.txt-tiedostoa, mukaan lukien Disallow-säännöt, Crawl-delay ja Request-rate.
  • Se lukee vain julkisia tuotesivuja, joita hakukone näyttää yksittäiselle tuotteelle, ei koskaan kokonaisia verkkosivustoja, eikä se koskaan kirjaudu sisään, täytä lomakkeita tai tee tilauksia.
  • Se lukee enintään muutaman sivun per sivusto kerrallaan, kiinteällä sivustokohtaisella minuuttikohtaisella rajalla.
  • Sivustoa, joka vastaa virhekoodilla 403, 429 tai bottitarkistuksella, vältetään tuntikausia, ja muutaman kerran jälkeen pysyvästi.
  • Aiemmin löydetyt tuotteet haetaan omasta välimuististamme, joten samaa sivua ei lueta yhä uudelleen.

Miten se tunnnistetaan

Bottimme ilmoittaa aina kuka se on eikä koskaan teeskentele olevansa selain.

  • User-Agent: DataEnricher/1.0 (+https://data-enricher.com/en/bot)
  • From: info@mark-app.com
  • IP-osoitteet: 188.245.8.38, 2a01:4f8:c014:25c4::1
  • Reverse DNS: crawler.data-enricher.com

Rajoittaminen tai estäminen

Haluatko estää botin pääsyn koko sivustollesi? Lisää tämä robots.txt-tiedostoosi:

User-agent: DataEnricher
Disallow: /

Tai pyydä pidempää viivettä sivujen välille (sekunteina):

User-agent: DataEnricher
Crawl-delay: 10

Kysymykset tai ongelmat

Eikö jokin toimi oikein tai haluatko meidän jättävän sivustosi (tai osan siitä) huomioimatta? Lähetä meille sähköpostia, niin hoidamme asian kuntoon: info@mark-app.com