SBuilderAgentsBot
Onze websitelezer bezoekt een website alleen als iemand op agents.sbuilder.nl een assistent voor die website maakt. Hij:
- leest maximaal ±15 openbare pagina's van één domein, met hooguit 3 verzoeken tegelijk en een totale tijdslimiet;
- respecteert
robots.txt(user-agentSBuilderAgentsBot, of anders*); - leest alleen tekst, logt niet in, vult geen formulieren in en volgt geen links naar andere domeinen.
Liever niet? Zet in je robots.txt:
User-agent: SBuilderAgentsBot Disallow: /
Vragen of klachten: info@sbuilder.nl.