User-agent: Yandex # Общее правило для роботов. * означает для всех видов роботов поисковых систем Disallow: / # Запрет обхода всего сайта Disallow: /cgi-bin # Запрет стандартной папки на хостинге. Disallow: /wp-admin/ # Запрет админки WordPress. Disallow: /wp-json/ # Запрет админки Json. Disallow: /wp-includes/ # Запрет админки файлов ядра. Disallow: /themes/ # Запрет админки файлов темы ?. Disallow: /trackback/ # Запрет админки файлов уведомлений. Disallow: /feed/ # Запрет feed/RSS (уведомления новостей в особом формате). Disallow: /rss/ # Запрет feed/RSS (уведомления новостей в особом формате). Disallow: /comment/ # Запрет комментариев. Disallow: /tag/ # Запрет индексации меток. Disallow: /? # Запрет get параметов запроса на главной. Disallow: *?s= # Запрет поиска WordPress. Disallow: *&s= # Запрет поиска WordPress. Disallow: /search # Запрет поиска WordPress. Disallow: /author/ # Запрет архива автора. Disallow: /category/ # Запрет категорий. Disallow: /*.js # Запрет технических файлов JS. Disallow: /*.inc # Запрет технических файлов INC. Disallow: /*.css # Запрет технических файлов CSS. Disallow: /*? # Запрет get параметов запроса на остальных страницах. Disallow: /*.gz # Запрет архивов файлов. Disallow: */embed$ # Запрет встраиваемых ссылок. Disallow: */xmlrpc.php # Запрет WordPress API Disallow: *utm*= # Запрет ссылком с utm-метками Disallow: *openstat= # Запрет ссылок с метками openstat Disallow: /user-agreement/ # Запрет своей созданной страницы. User-agent: * # Общее правило для роботов. * означает для всех видов роботов поисковых систем Disallow: /cgi-bin # Запрет стандартной папки на хостинге. Disallow: /wp-admin/ # Запрет админки WordPress. Disallow: /wp-json/ # Запрет админки Json. Disallow: /wp-includes/ # Запрет админки файлов ядра. Disallow: /themes/ # Запрет админки файлов темы ?. Disallow: /trackback/ # Запрет админки файлов уведомлений. Disallow: /feed/ # Запрет feed/RSS (уведомления новостей в особом формате). Disallow: /rss/ # Запрет feed/RSS (уведомления новостей в особом формате). Disallow: /comment/ # Запрет комментариев. Disallow: /cart/ # Запрет комментариев. Disallow: /checkout/ # Запрет комментариев. Disallow: /my-account/ # Запрет комментариев. Disallow: /terms-conditions/ # Запрет. Disallow: /tag/ # Запрет индексации меток. Disallow: /? # Запрет get параметов запроса на главной. Disallow: *?s= # Запрет поиска WordPress. Disallow: *&s= # Запрет поиска WordPress. Disallow: /search # Запрет поиска WordPress. Disallow: /author/ # Запрет архива автора. Disallow: /category/ # Запрет категорий. Disallow: /*.js # Запрет технических файлов JS. Disallow: /*.inc # Запрет технических файлов INC. Disallow: /*.css # Запрет технических файлов CSS. Disallow: /*? # Запрет get параметов запроса на остальных страницах. Disallow: /*.gz # Запрет архивов файлов. Disallow: */embed$ # Запрет встраиваемых ссылок. Disallow: */xmlrpc.php # Запрет WordPress API Disallow: *utm*= # Запрет ссылком с utm-метками Disallow: *openstat= # Запрет ссылок с метками openstat Disallow: /user-agreement/ # Запрет своей созданной страницы. Clean-param: gtm_debug # Очистка get параметов для роботов поисковых систем Clean-param: ym_debug # Очистка get параметов для роботов поисковых систем Clean-param: ysclid # Очистка get параметов для роботов поисковых систем Clean-param: attachment_id # Очистка get параметов для роботов поисковых систем Host: smep.by Sitemap: https://smep.by/sitemap.xml