#
# robots.txt
#
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
#
# This file will be ignored unless it is at the root of your host:
# Used:    http://example.com/robots.txt
# Ignored: http://example.com/site/robots.txt
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/robotstxt.html

User-agent: *
# CSS, JS, Images
Allow: /core/*.css$
Allow: /core/*.css?
Allow: /core/*.js$
Allow: /core/*.js?
Allow: /core/*.gif
Allow: /core/*.jpg
Allow: /core/*.jpeg
Allow: /core/*.png
Allow: /core/*.svg
Allow: /profiles/*.css$
Allow: /profiles/*.css?
Allow: /profiles/*.js$
Allow: /profiles/*.js?
Allow: /profiles/*.gif
Allow: /profiles/*.jpg
Allow: /profiles/*.jpeg
Allow: /profiles/*.png
Allow: /profiles/*.svg
# Directories
Disallow: /core/
Disallow: /profiles/
# Files
Disallow: /README.txt
Disallow: /web.config
# Paths (clean URLs)
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /filter/tips
Disallow: /node/add/
Disallow: /search/
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login
Disallow: /user/logout
Disallow: /media/oembed
Disallow: /*/media/oembed
# Paths (no clean URLs)
Disallow: /index.php/admin/
Disallow: /index.php/comment/reply/
Disallow: /index.php/filter/tips
Disallow: /index.php/node/add/
Disallow: /index.php/search/
Disallow: /index.php/user/password
Disallow: /index.php/user/register
Disallow: /index.php/user/login
Disallow: /index.php/user/logout
Disallow: /index.php/media/oembed
Disallow: /index.php/*/media/oembed

# Règles spécifiques Caf.fr
Disallow: /allocataires/caf-de-la-vendee/offre-de-service/accident-de-vie/je-dois-rembourser-une-dette-la-caf
Disallow: /allocataires/caf-de-la-mayenne/offre-de-service/thematique-libre/contacter-un-conseiller-de-la-caf-de-la-mayenne
Disallow: /allocataires/caf-du-var/offre-de-service/logement/je-suis-etudiant/les-rendez-vous-caf-ne-pas-manquer
Disallow: /allocataires/caf-du-var/offre-de-service/vie-professionnelle/je-suis-travailleur-non-salarie
Disallow: /allocataires/caf-de-tarn-et-garonne/actualites-departementales/la-caf-vous-accueille-sur-rendez-vous-0
Disallow: /allocataires/caf-de-tarn-et-garonne/actualites-departementales/vous-rencontrez-des-difficultes-avec-l-ecrit-ou-pour-remplir-un-formulaire
Disallow: /allocataires/caf-de-tarn-et-garonne/actualites-departementales/plus-besoin-de-vous-deplacer-pour-contacter-la-caf
Disallow: /allocataires/caf-de-tarn-et-garonne/actualites-departementales/caf-mode-d-emploi 
Disallow: /allocataires/caf-de-tarn-et-garonne/actualites-departementales/la-caf-vous-accueille-sur-rendez-vous
Disallow: /allocataires/caf-de-tarn-et-garonne/offre-de-service/vie-personnelle/faciliter-vos-demarches-et-vous-informer-sur-vos-droits-et-vos-obligations-vis-vis-de-la-caf/privilegiez-les-demarches-en-ligne
Disallow: /allocataires/caf-de-tarn-et-garonne/offre-de-service/vie-personnelle/faciliter-vos-demarches-et-vous-informer-sur-vos-droits-et-vos-obligations-vis-vis-de-la-caf
Disallow: /allocataires/caf-de-tarn-et-garonne/offre-de-service/vie-personnelle/faciliter-vos-demarches-et-vous-informer-sur-vos-droits-et-vos-obligations-vis-vis-de-la-caf/ne-vous-deplacez-plus-visiordv-c-est-l-expertise-d-un-conseiller-caf-domicile
Disallow: /allocataires/caf-de-l-aube/actualites-departementales/nouveau-les-rendez-vous-la-caf-de-l-aube-peuvent-se-faire-en-visio
Disallow: /allocataires/caf-de-la-haute-vienne/offre-de-service/thematique-libre/contacter-ma-caf
Disallow: /allocataires/caf-du-nord/offre-de-service/thematique-libre/je-souhaite-prendre-un-rendez-vous-avec-la-caf-du-nord
Disallow: /allocataires/caf-de-la-haute-vienne/offre-de-service/thematique-libre/contacter-ma-caf
Disallow: /allocataires/caf-de-la-cote-d-or/offre-de-service/thematique-libre/rendez-vous
Disallow: /allocataires/caf-de-la-cote-d-or/offre-de-service/thematique-libre/formulaire
Disallow: /allocataires/caf-de-la-manche/actualites-departementales/nouveau-le-visio-rendez-vous
Disallow: /allocataires/caf-de-la-manche/actualites-departementales/votre-enfant-sera-bientot-etudiant-ou-apprenti-et-prendra-un-logement
Disallow: /allocataires/caf-de-la-manche/offre-de-service/vie-personnelle/je-me-separeje-vis-seule-avec-unplusieurs-enfants/l-accompagnement-social-et-les-aides-financieres/l-accompagnement-social
Disallow: /allocataires/caf-de-la-manche/offre-de-service/vie-personnelle/j-ai-perdu-un-proche/l-accompagnement-social-et-les-aides-financieres/l-accompagnement-social
Disallow: /allocataires/caf-de-la-manche/offre-de-service/logement/je-ne-peux-plus-payer-mon-loyer/l-unite-logement-et-cadre-de-viel-accompagnement-socialles-aides-financieres/l-accompagnement-social-aux-familles-avec-enfants-charge
Disallow: /allocataires/caf-de-la-manche/offre-de-service/accident-de-vie/je-me-separeje-vis-seule-avec-unplusieurs-enfants/l-accompagnement-social-et-les-aides-financieres/l-accompagnement-social
Disallow: /allocataires/caf-de-la-manche/offre-de-service/accident-de-vie/j-ai-perdu-un-proche/l-accompagnement-social-et-les-aides-financieres/l-accompagnement-social
Disallow: /allocataires/caf-de-la-somme/offre-de-service/thematique-libre/rembourser-la-caf
Disallow: /allocataires/caf-du-gard/offre-de-service/thematique-libre/nous-contacter
Disallow: /allocataires/caf-de-l-aude/actualites-departementales/besoin-d-aide-pour-vos-demarches-sur-caffr-avec-visioconnect-plus-besoin-de-vous-deplacer
Disallow: /allocataires/caf-de-seine-et-marne/offre-de-service/accident-de-vie/deces-d-un-proche/l-allocation-versee-en-cas-de-deces-d-enfant
Disallow: /allocataires/caf-de-la-guyane/offre-de-service/solidarite-et-insertion/solidarite-et-insertion
Disallow: /allocataires/caf-de-la-guyane/actualites-departementales/accueil-sur-rendez-vous-exclusif
Disallow: /allocataires/caf-de-maine-et-loire/offre-de-service/thematique-libre/je-souhaite-prendre-rendez-vous-avec-un-travailleur-social
Disallow: /sites/default/files/medias/501/BLOC%20CONTACTS.pdf
Disallow: /allocataires/caf-d-ille-et-vilaine/offre-de-service/accident-de-vie/la-mediation-administrative
Disallow: /partenaires/tuteurs-moraux