User-agent: Googlebot
# On empeche l'indexation des fichiers sensibles
Disallow: /*.php$
Disallow: /*.inc$
Disallow: /*.gz$
Disallow: /*.swf$
Disallow: /*.wmv$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /wp-content/uploads/*
#Bloquer Google favicon
User-agent: Google Favicon
Disallow: /wp-content/uploads/*
# Bloquer Google Image, vidéo
User-agent: Googlebot-Image
User-agent : Googlebot-Video
Disallow: /wp-content/uploads/*
# Autoriser Google Recherche vocale (?)
User-agent: Google-Read-Aloud
Allow: /*
# Autoriser Google Recherche contenu (?), News
User-agent: Google-read-aloud
User-agent: Googlebot-News
User-agent : google-speakr
User-agent: DuplexWeb-Google
User-agent : googleweblight
Allow: /*
#Autoriser Google mobile ads et Google ads, media partner
User-agent: AdsBot-Google-Mobile
User-agent: AdsBot-Google
User-agent: Mediapartners-Google
Allow: /*
#Bloquer chatgpt
User-agent: CCBot
Disallow: /
# Autoriser Bing, Yahoo, Ask, Baidu, Yandex, Apple, Exalead, Alexa, Qwant, Wikipedia,DuckDuckBot
User-agent: bingbot
User-agent: Yahoo! Slurp
User-agent: Teoma
User-agent: Baiduspider
User-agent: Yandex
User-agent: Applebot
User-agent: Exabot
User-agent: ia_archiver
User-agent: Qwantify
User-agent: wikiwix
User-agent: DuckDuckBot
user-agent: Pinterest
User-agent: coccocbot
User-agent: coccocbot-web
User-agent: 360Spider
User-agent: Yeti
User-agent: Sogou web spider
User-agent: Sogou
User-Agent: seekbot
User-Agent: Seekport
User-Agent: Seekport Crawler
User-agent: Linguee
User-agent: DeuSu
User-agent: TurnitinBot
Allow: /*
#Pour les autres robots
User-agent: *
Disallow: /wp-content/uploads/*
# spamming bot, badbot et robots trop gourmands
User-agent: MJ12bot
User-agent: Orthogaffe
User-agent: UbiCrawler
User-agent: DOC
User-agent: Zao
User-agent: sitecheck.internetseer.com
User-agent: Zealbot
User-agent: MSIECrawler
User-agent: SiteSnagger
User-agent: WebStripper
User-agent: WebCopier
User-agent: Fetch
User-agent: Offline Explorer
User-agent: Teleport
User-agent: TeleportPro
User-agent: WebZIP
User-agent: linko
User-agent: HTTrack
User-agent: Microsoft.URL.Control
User-agent: Xenu
User-agent: larbin
User-agent: libwww
User-agent: ZyBORG
User-agent: Download Ninja
User-agent: fast
User-agent: wget
User-agent: NPBot
User-agent: WebReaper
User-agent: MojeekBot
User-agent: Cliqzbot
User-agent: IstellaBot
User-agent: psbot
User-agent: coccocbot-image
User-agent: spbot
User-agent: proximic
User-agent: BizInformation
User-agent: BLEXBot
User-agent: Riddler
User-agent: ltx71
User-agent: magpie-crawler
User-agent: grapeshot
User-agent: GrapeshotCrawler
User-agent: GigablastOpenSource
User-agent: BUbiNG
User-agent: linkdexbot
User-agent: linkdexbot/2.2
User-agent: SEOkicks
User-agent: SEOkicks-Robot
User-Agent: panscient.com
User-agent: WebDataStats
User-agent: ZoominfoBot
User-agent: CCBot
Disallow: /
# On indique au spider le lien vers notre sitemap
Sitemap: https://www.travailleurs-europeens.fr/sitemaps.xml
@@@@(
@@@@@@@@@,
#@@@@@@@@@@@&
(@# ,&@. @@@@@@@@@@@@
(% ,@.,@@@@@@@@@@@@
/# %@@@@@@@@@@@@
/* ./ ,@@@@ #@@@@@@@@@@@@@#
@ %@@@@@@@@@@@@& /@@@@@@@@@@@@@@
& @@@@@@@@@@@@@@@@@@@ @@@@@@@@@@@&(,
* @@@@@@@@@@@@@@@@@@@@@ @@@@@@@@@@ &
@ @@@@@@@@@@@@@@@@@@@@@@@ @@@@@@@@. ,
@ @@ @@@@@@@@@@@@@@@@@@@@@@@@@/@@@@@@&. .
% &@@@/ @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@. *.
. ,@ ,@@@@@@@@@( @@@@@@@@@@@@@@@@@@@@@@@@@@@@@# &
@ ,@@@@@@@@@@@(#@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ ,.
& @@@@@@@# %@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ /
# @/ .@@@@(.&@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@# (
@ /@@@@@@(&. &@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@# ,
( .@.,*.. & @@@@@@@@@@@@*.@@@@@@@@@@@@@@. %
# (.%,, **% .@@@, %@@@* ,@@@@@@@@@@@@ *
* # .@@ .@@@ (@@@ &@@@@@@@@@@, @
.* %@@ &@@/ @@@@@@@@& @
% .@@@ %@@@ %@@*/@@@% #
# &@@ ,@@, &@@& @@@@@ %
% @@ #@@ ,@@@ @@@. (.
/. @@,@@@ @@ @@@ @
&. @@*,@@. @@ ,@@ &,
,@ ,@@@@@@@@@@ &@@@@@ @@ *&
*@@@@ @/ #@@@@ @@@@@
,*//*,. @@@@@
*