Главная / Техническая оптимизация / Правильный Robots.txt для WordPress
Robots.txt

Правильный Robots.txt для WordPress

Посмотреть в отдельном окне

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /feed
Disallow: */feed
Disallow: /category/*/*
Disallow: /comments
Disallow: */comment-*
Disallow: */trackback
Disallow: /author
Disallow: /cgi-sys
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /feed
Disallow: */feed
Disallow: /category/*/*
Disallow: /comments
Disallow: */comment-*
Disallow: */trackback
Disallow: /author
Disallow: /cgi-sys
Host: site.ru
Sitemap: http://site.ru/sitemap.xml
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
User-agent: YandexImages
Allow: /wp-content/uploads/

Что запрещаем в robots.txt ?

  • фильтры, подбор товаров, сортировки
  • страницы действий, добавить в корзину, сравнение товаров, перенос в избранное
  • Встроенный поиск по сайту
  • Служебные страницы,каталоги,конфиденциальные данные
  • Админка
  • Идентификаторы сессий, UTM

не знаете что закрывать ? спросите себя.НУЖНА ЛИ ЭТА СТРАНИЦА ПОЛЬЗОВАТЕЛЯМ ПОИСКОВИКА? — если нет то закрываем

ЧИТАЙТЕ ТАКЖЕ

Дополнительные рекомендации для сайта

Какую дополнительную информацию мы можем передать поиску Задать Регион — уточняем к какому региону относимся …

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *