SiteDolphinBot
Har du sett SiteDolphinBot/1.0 i loggarna? Det är vår sökrobot. Våra kunder använder den för att kontrollera sina webbplatser efter trasiga länkar, bilder och certifikatproblem.
Så fungerar sökroboten
- Länkkontrollen följer
robots.txt. - Veckokontroller använder högst två samtidiga anrop. Gratiskontroller använder upp till åtta, med gränser för tid och antal sidor.
- Läser webbplatskartan först och går igenom högst några hundra sidor en gång i veckan.
- Länkkontrollen sparar fynd och tekniska mätvärden. Den dagliga innehållskontrollen sparar upp till 20 000 tecken från startsidan som jämförelseunderlag.
Vill du blockera den?
Lägg till detta i din robots.txt för att blockera länkkontrollen. Tillgänglighet, certifikat och DNS kontrolleras separat. Kontakta oss om alla kontroller ska stoppas.
User-agent: SiteDolphinBot Disallow: /
Frågor eller synpunkter? Mejla info@olav.se så får du svar av en människa.