Para quem gere um site
CostaYGolfBot, o rastreador da Costa y Golf
Se encontrou esta página nos registos do seu servidor, o nosso rastreador visitou o seu site. Lemos os sites dos campos de golfe para preparar as respetivas fichas: percursos, green fees, instalações e como lá chegar. O que publicamos é sempre texto nosso, revisto à mão; nunca copiamos os seus textos.
Como se identifica
Todos os pedidos levam este cabeçalho User-Agent:
CostaYGolfBot/1.0 (+https://costaygolf.com/bot)Como se comporta
- Respeita o robots.txt e não entra no que tiver vedado.
- Só lê o domínio que lhe pediram para visitar e nunca segue ligações para outros sites.
- Espera 1,5 segundos entre dois pedidos ao mesmo servidor.
- Deixa de ler uma página quando chega ao limite de tamanho e não segue ligações que se repetem sem fim, como calendários infinitos ou caminhos em ciclo.
Como bloqueá-lo
Acrescente estas linhas ao seu robots.txt e ele não voltará a ler o seu site:
User-agent: CostaYGolfBot
Disallow: /Contacto
Se o rastreador lhe causar algum problema, ou se quiser que corrijamos algo na ficha do seu campo, escreva-nos para bot@costaygolf.com.
bot@costaygolf.com