Mitä se tekee
Data Enricher auttaa verkkokauppoja täydentämään tuotetietojaan. Kun verkkokauppa hakee tuotetta (EAN-koodilla tai tuotenelmällä), etsimme verkosta ja luemme muutaman julkisen tuotesivun löytääksemme tiedot, kuten tekniset tiedot ja mitat. Emme kopioi tekstejäsi: tekoäly kirjoittaa uudet tekstit tosiasioiden pohjalta.
Miten se toimii
- Se noudattaa robots.txt-tiedostoa, mukaan lukien Disallow-säännöt, Crawl-delay ja Request-rate.
- Se lukee vain julkisia tuotesivuja, joita hakukone näyttää yksittäiselle tuotteelle, ei koskaan kokonaisia verkkosivustoja, eikä se koskaan kirjaudu sisään, täytä lomakkeita tai tee tilauksia.
- Se lukee enintään muutaman sivun per sivusto kerrallaan, kiinteällä sivustokohtaisella minuuttikohtaisella rajalla.
- Sivustoa, joka vastaa virhekoodilla 403, 429 tai bottitarkistuksella, vältetään tuntikausia, ja muutaman kerran jälkeen pysyvästi.
- Aiemmin löydetyt tuotteet haetaan omasta välimuististamme, joten samaa sivua ei lueta yhä uudelleen.
Miten se tunnnistetaan
Bottimme ilmoittaa aina kuka se on eikä koskaan teeskentele olevansa selain.
- User-Agent:
DataEnricher/1.0 (+https://data-enricher.com/en/bot) - From:
info@mark-app.com - IP-osoitteet:
188.245.8.38,2a01:4f8:c014:25c4::1 - Reverse DNS:
crawler.data-enricher.com
Rajoittaminen tai estäminen
Haluatko estää botin pääsyn koko sivustollesi? Lisää tämä robots.txt-tiedostoosi:
User-agent: DataEnricher
Disallow: /
Tai pyydä pidempää viivettä sivujen välille (sekunteina):
User-agent: DataEnricher
Crawl-delay: 10
Kysymykset tai ongelmat
Eikö jokin toimi oikein tai haluatko meidän jättävän sivustosi (tai osan siitä) huomioimatta? Lähetä meille sähköpostia, niin hoidamme asian kuntoon: info@mark-app.com