User-agent: *
Crawl-delay: 600
Disallow: /cgi-bin # классика...
Disallow: /? # все параметры запроса на главной
Disallow: /wp- # все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow: *?s= # поиск
Disallow: *&s= # поиск
Disallow: /search # поиск
Disallow: /author/ # архив автора
Disallow: */embed # все встраивания
Disallow: */page/ # все виды пагинации
Disallow: /old
Allow: */uploads # открываем uploads
Allow: /*/*.js # внутри /wp- (/*/ - для приоритета)
Allow: /*/*.css # внутри /wp- (/*/ - для приоритета)
Allow: /wp-*.png # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpg # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpeg # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.gif # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.svg # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.pdf # файлы в плагинах, cache папке и т.д.
Allow: /wp-admin/admin-ajax.php
Sitemap: http://gaz-voshod.ru/sitemap.xml
Sitemap: http://gaz-voshod.ru/sitemaps/post_tag-sitemap.xml
Sitemap: http://gaz-voshod.ru/sitemaps/category-sitemap.xml
Sitemap: http://gaz-voshod.ru/sitemaps/page-sitemap1.xml
Sitemap: http://gaz-voshod.ru/sitemaps/post-sitemap3.xml
Sitemap: http://gaz-voshod.ru/sitemaps/post-sitemap2.xml