Правильный robots.txt для wordpress

За несколько лет было перепробовано много формул успешного Robots.txt, но остановился на этом. Сайты быстро индексируются и ничего лишнего роботы не захватывают.

User-agent: Yandex
Disallow: /wp-admin*
Disallow: /archive/
Disallow: */trackback/
Disallow: */comments/
Disallow: */comment-page-*
Disallow: */page/
Disallow: /tag/
Disallow: */feed/
Disallow: /wp-includes*
Disallow: /category/
Disallow: /comments/page
Disallow: /*?s=
Disallow: /*&s=
Disallow: /trackback
Disallow: /*.html/feed
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/languages/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-content/upgrade/
Disallow: /*?*
Disallow: /*?
Disallow: /xmlrpc.php
Host: https://good-webmaster.ru

User-agent: *
Disallow: /wp-admin*
Disallow: /wp-includes*
Disallow: /tag/
Disallow: /category/
Disallow: */comment-page-*
Disallow: */page/
Disallow: /tag/
Disallow: */feed/
Disallow: /wp-includes*
Disallow: /comments/page
Disallow: /*?s=
Disallow: /*&s=
Disallow: /trackback
Disallow: /*.html/feed
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/languages/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-content/upgrade/
Disallow: /*?*
Disallow: /*?
Sitemap: https://good-webmasteer.ru/sitemap_index.xml

Формула Robots.txt для WordPress готова. Поменяйте домен на свой и укажите свой http или https, а так же пропишите правильную дорогу к вашей карте сайта. Данная дорога лежит к карте Sitemap плагина Seo by Yoast.

Автор публикации

не в сети 3 месяца

FSM

777

Создание и продвижение премиальных сайтов

Комментарии: 6Публикации: 482Регистрация: 28-06-2021