robotstxt.org.ru

Файл «robots.txt» — как правильно составить файл robots.txt для сайта. Запрет индексации страниц сайта.

Файл robots.txt – это текстовый файл, находящийся в корневой директории сайта, в котором записываются специальные инструкции для поисковых роботов. Если вы –

Alexa stats for robotstxt.org.ru

Site Seo for robotstxt.org.ru

Tag :

H1	H2	H3	H4	H5
1	6	8	0	0

Image :

There are 3 images on this website and 2 images have alt attributes

Frame :

There are 0 embed on this website.

Flash :

There are 0 flash on this website.

Size :

42,856 characters

Meta Description :

Yes

Meta Keyword :

Magestic Backlinks for robotstxt.org.ru

About robotstxt.org.ru

Domain	robotstxt.org.ru
MD5	434d7225d2524cedd5199162d22fdf55
Google Analytic	UA-111406847-1
Charset	UTF-8

Page Speed	Check now
Programming Language	PHP/5.6.40
Web server	nginx-reuseport/1.21.1
Javascript library	jquery
IP Address	5.101.153.214

#                  o
#                  |
#                ,'~'.
#               /     \
#              |   ____|_
#              |  '___,,_'         .----------------.
#              |  ||(o |o)|       ( KILL ALL HUMANS! )
#              |   -------         ,----------------'
#              |  _____|         -'
#              \  '####,
#               -------
#             /________\
#           (  )        |)
#           '_ ' ,------|\         _
#          /_ /  |      |_\        ||
#         /_ /|  |     o| _\      _|| 
#        /_ / |  |      |\ _\____//' |
#       (  (  |  |      | (_,_,_,____/
#        \ _\ |   ------|        
#         \ _\|_________|
#          \ _\ \__\\__\
#          |__| |__||__|
#       ||/__/  |__||__|
#               |__||__|
#               |__||__|
#               /__)/__)
#              /__//__/
#             /__//__/
#            /__//__/.
#          .'    '.   '.
#         (________)____)
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
#
User-agent: *                  
Disallow: /cgi-bin             
Disallow: /wp-admin/           
Disallow: /wp/                
Disallow: /?                   
Disallow: *?s=                
Disallow: *&s=                 
Disallow: /search            
Disallow: /author/             
Disallow: */embed              
Disallow: */page/              
Disallow: */xmlrpc.php         
Disallow: *utm*=               
Disallow: *openstat=          
Disallow: /wp-                 
Allow: */wp-*/*ajax*.php   
Allow: */wp-sitemap        
Allow: */uploads            
Allow: */wp-*/*.js          
Allow: */wp-*/*.css        
Allow: */wp-*/*.png         
Allow: */wp-*/*.jpg         
Allow: */wp-*/*.jpeg        
Allow: */wp-*/*.gif         
Allow: */wp-*/*.svg         
Allow: */wp-*/*.webp       
Allow: */wp-*/*.pdf         
							   
Host: robotstxt.org.ru
Sitemap: http://robotstxt.org.ru/sitemap.xml