comptazine.fr

User-agent : *   
# cela signifie que l�on s�adresse � tous les robots

Disallow: /wp-login.php   
# ne pas indexer la page de connexion du back-office

Disallow: /wp-admin   
# ne pas indexer le dossier wp-admin et ce qu�il contient

Disallow: /wp-content  
# ne pas indexer le dossier wp-content et ce qu�il contient

Disallow: /wp-includes  
# ne pas indexer le dossier wp-includes et ce qu�il contient

Allow: /wp-content/uploads/  
# On autorise l�indexation du dossier uploads contenant les photos et les vid�os... 
# Il s�agit d�une exception, 
# car ce dossier uploads est situ� dans le dossier wp-content que l�on n�indexe pas.

Disallow: /cgi-bin 
# on n�indexe pas ce r�pertoire sensible

Disallow: /*.php$ 
Disallow: /*.inc$
Disallow: /*.gz$
Disallow: /*.cgi$
# on n�indexe pas les diff�rents fichiers sensibles

Disallow: */trackback 
# on n�indexe pas les URL de trackback et ping

Disallow: /*/feed      
# on n�indexe pas les flux RSS sauf le flux RSS principal
# pour qu'aucun flux RSS ne soit index�, il suffit de retirer le /*

Disallow: /*/comments  
# on n�indexe pas les URL des commentaires laiss�s par les internautes

Disallow: /*? 
# on n�indexe pas les URL contenant des param�tres particuliers
# cela permet notamment d'�viter les pages avec des contenus dupliqu�s

Allow: /*css?*  
Allow: /*js?*
# on autorise l�acc�s aux fichiers CSS et JS 
# pour ne pas �tre p�nalis� sur la recherche par mobile.