Como interpretar
O robots.txt declara preferências de acesso por user-agent. Permitir um bot não garante que consiga ultrapassar uma firewall ou que venha a citar o site. As regras para treino e pesquisa têm finalidades diferentes.
Queres o diagnóstico técnico completo? Faz uma auditoria grátis →