User-agent: * # общие правила дл¤ роботов, кроме яндекса и Google,
# т.к. дл¤ них правила ниже
Disallow: /cgi-bin # папка на хостинге
Disallow: /? # все параметры запроса на главной
Disallow: /wp- # все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow: /wp-admin/
Disallow: *?s= # поиск
Disallow: *&s= # поиск
Disallow: /search/ # поиск
Disallow: /author/ # архив автора
Disallow: /users/ # архив авторов
Disallow: */trackback # трекбеки, уведомлени¤ в комментари¤х о по¤влении открытой
# ссылки на статью
Disallow: */feed # все фиды
Disallow: */rss # rss фид
Disallow: */embed # все встраивани¤
Disallow: */wlwmanifest.xml # xml-файл манифеста Windows Live Writer (если не используете,
# правило можно удалить)
Disallow: /xmlrpc.php # файл WordPress API
Disallow: *utm*= # ссылки с utm-метками
Disallow: *openstat= # ссылки с метками openstat
Allow: */uploads # открываем папку с файлами uploads
Disallow: /bec62d.cologne
Disallow: /?p=791
Disallow: /b14.ally
Disallow: /b78
Disallow: /2b
Disallow: /ce8
Disallow: /9ee8
Disallow: /6aa
Disallow: /about.html
Disallow: /domain_names.html
Disallow: /vps_big.html
Disallow: /dedicated.html
Disallow: /news.html
Disallow: /vps.html
Disallow: /support.html
Disallow: /domain_names.html
Disallow: /about.html
Disallow: /d7
Disallow: /60
Crawl-delay: 10
Host: loretki.ru