Skip to content
Extraits de code Groupes Projets
Valider cb233f06 rédigé par real3t@gmail.com's avatar real3t@gmail.com
Parcourir les fichiers

Ralentir ces moteurs de recherche

parent b4258012
Aucune branche associée trouvée
Aucune étiquette associée trouvée
Aucune requête de fusion associée trouvée
Masquer les modifications d'espaces
En ligne Côte à côte
Affichage de
avec 4 ajouts et 1 suppression
robots.txt.html
+ 4
− 1
Voir le fichier @ cb233f06
......@@ -18,6 +18,9 @@ Allow: /sites/[(#URL_SITE_SPIP|replace{'www\.',''}|replace{'ww2\.',''}|replac
Sitemap: #URL_SITE_SPIP/sitemap.xml
User-agent: bingbot
Crawl-delay: 1
Crawl-delay: 29
User-Agent: MJ12bot
Crawl-Delay: 31
]
0% ou .
You are about to add 0 people to the discussion. Proceed with caution.
Terminez d'abord l'édition de ce message.
Veuillez vous inscrire ou vous pour commenter

Forge communautaire SPIP | Charte d'utilisation | Signaler un problème sur ce site