Resumo do domínio
robots.txt
Ficheiros adicionais
Meta robots
Cabeçalhos
Blog do Spider.es
Novidades, guias e notas da equipa Spider.es.
-
O que são os bots de crawl dos motores de busca (e por que importam)
Como Googlebot, Bingbot e outros rastreadores descobrem, renderizam e avaliam sites — e o que você precisa fazer para manter o acesso saudável.
-
O que é o Spider.es?
Conheça o Spider.es, o verificador instantâneo que mostra quais bots chegam ao seu site e o motivo de cada bloqueio.