Acompanhe as últimas notícias, explicações e histórias tecnológicas relacionadas.
A Cloudflare anunciou o Bot Preference Sync, um recurso que atualiza automaticamente o arquivo robots.txt de acordo com as configurações do site para robôs de busca, agentes e treinamento. O recurso estará disponível para todos os clientes, do plano gratuito ao Enterprise, mantendo disponível a opção de desativar a sincronização.