Suivez les dernières actualités, explications et histoires technologiques associées.
Cloudflare a annoncé Bot Preference Sync, une fonctionnalité qui met automatiquement à jour le fichier robots.txt selon les paramètres du site concernant les robots de recherche, les agents et l’entraînement. La fonctionnalité sera disponible pour tous les clients, de l’offre gratuite à Enterprise, avec la possibilité de désactiver la synchronisation.