В корневой директории сайта создаем файл Robots.txt и вносим в него следующий код:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 |
User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Host: www.yourdomain.ru Sitemap: http://yourdomain.ru/sitemap.xml |
