Nettstedsjekken
Når du kjører en nettstedsjekk, besøker roboten Aarvaken-Audit sidene dine. Den følger robots.txt og henter sidene i rolig tempo.
Blir roboten stoppet?
- Tillat brukeragenten
Aarvaken-Auditi brannmuren eller i reglene for hastighetsbegrensning. - Vil du utelate deler av nettstedet, legg til en egen gruppe for
Aarvaken-Auditirobots.txt. - Shopify: bruk «Crawler access» i Shopify og lim signaturen inn under Innstillinger → Crawler-tilgang i Årvåken.
Spørsmål? Bruk kontaktskjemaet.