Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Сегодня сразу после обновления движка WordPress Яндекс прислал мне страшилку с запретом индексирования сайта. Обновление WordPress прошло при этом успешно, только файла robots.txt я на хостинге не обнаружил, так что будьте бдительны. Пришлось заливать на хостинг новый файл robots.txt и раз уж пришлось делать это, я решил показать, что именно у меня в robots.txt для WordPress если пригодится я буду рад.
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: ВашСайт.ru
Sitemap: http://ВашСайт/sitemap.xml
Пользуйтесь! П.С. ВашСайт — заменить на адрес вашего сайта

Полезная информация:

Как быстро узнать версию ISPConfig 3 (ssh)

Разделитель в iSape / Sape

Ошибка платежа Яндекс.Касса и Woocommerce

Отображение и текста и логотипа в шаблоне WordPress

Ошибка Deprecated: Function ereg() is deprecated in /samefile.php on line 142

Правильный robots.txt

WordPress не работают постоянные ссылки (404 Not Found)

Woocommerce: изменить "Спасибо. Ваш заказ был принят."

WordPress http error - решение проблемы

Полезные фотосервисы

Красивые письма с WP Better Emails

Footer в functions.php для дочерней (child) темы StoreFront WordPress

Задача: выравнять картинки по центру div-ов с помощью CSS

Как убрать точки li в меню

Как отключить сообщения «системы безопасности» Mac OS X

Отображение количества просмотров статьи в подходящем месте

Простой скрипт обратного отсчета (javascript)

Обновляем WordPress до 3.5

Красивые WordPress caption

Удаляем строки Saphali Lite, Woocommerce, All in one seo pack

Как включить logging (debugging) в ISPConfig 3

Как добавить редирект (301) в ISPConfig

Польза простых файлов .bat

Html в конце ссылок страниц WordPress

Обвести текст при помощи HTML и CSS

Как включить интернациональные домены (punycode) в ISPConfig3

Русификация плагина «NextGEN Gallery» (файл)

Простой плагин email рассылки (Newsletter) для WordPress

Как изменить длину анонса (excerpt) плагин

Добавление меню в старый шаблон WordPress

Случайный вывод кода (видео, текст, картинки)

Добавить html в категорию и страницу

Несколько простых команд для Cent OS

Добавление бесплатного SSL сертификата на WordPress

Управления ссылками WordPress плагин WPNoExternalLinks

Плагин карты сайта XML

Как распечатать каталог содержимого на диске

WordPress Super Cache - кто такой?

Еще раз SSH Find и размер файлов

Локализация woocommerce Print Invoice & Delivery Note

Поиск по размеру файла в Ubuntu

TimThumb error has occured WordPress

Полезные плагины WordPress

Переезд на новый домен

Добавить новый sidebar

Удаление плагинов WordPress

Сделать изображения одинаковыми по высоте средствами CSS

Системные переменные Windows

Как убрать ссылку из плагина iSape в WordPress

Простой и красивый способ украсить UnderConstruction

Удалить все meta name=generator WordPress, Woocommerce, Saphali

При обновлении произошла ошибка: Не удалось определить директорию содержимого

Cherry FrameWork logo + description

Добавление PageNavi (постраничной навигации) в нестандартные шаблоны

Обновление url и адрес картинок после изменения адреса блога

Метки: , , , , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.