Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Сегодня сразу после обновления движка WordPress Яндекс прислал мне страшилку с запретом индексирования сайта. Обновление WordPress прошло при этом успешно, только файла robots.txt я на хостинге не обнаружил, так что будьте бдительны. Пришлось заливать на хостинг новый файл robots.txt и раз уж пришлось делать это, я решил показать, что именно у меня в robots.txt для WordPress если пригодится я буду рад.
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: ВашСайт.ru
Sitemap: http://ВашСайт/sitemap.xml
Пользуйтесь! П.С. ВашСайт — заменить на адрес вашего сайта

Полезная информация:

Как добавить отображения даты в подвале сайта WordPress.
Woocommerce WaitingList
Полная русификация Woocommerce
Русификация плагина «NextGEN Gallery» (файл)
Как убрать точки li в меню
Удаляем строки Saphali Lite, Woocommerce, All in one seo pack
Доступ к namebased сайту без DNS-записи в Windows
Сделать изображения одинаковыми по высоте средствами CSS
Локализация woocommerce Print Invoice & Delivery Note
Во время загрузки произошла ошибка... WordPress
Как в WordPress импортировать .xml файл больше 2mb
Задача: выравнять картинки по центру div-ов с помощью CSS
Добавить новый sidebar
WordPress http error - решение проблемы
Управления ссылками WordPress плагин WPNoExternalLinks
Случайный вывод кода (видео, текст, картинки)
Количество сопутствующих товаров в Woocommerce
При обновлении произошла ошибка: Не удалось определить директорию содержимого
Как распечатать каталог содержимого на диске
Как выводить первую картинку поста wordpress
Площадки для размещения статей
Отображение количества просмотров статьи в подходящем месте
Правильные анонимайзеры
Footer в functions.php для дочерней (child) темы StoreFront WordPress
Повышение безопасности – редактируем .htaccess
Ошибка Deprecated: Function ereg() is deprecated in /samefile.php on line 142
Как удалить ссылки на картинки в новостях WordPress
Как добавить редирект (301) в ISPConfig
Jazzy Forms плагин, который радует!
Как настроить DNS шаблоны в ISPConfig 3
Красивые WordPress caption
Как добавить алиас домена ISPConfig
Добавление бесплатного SSL сертификата на WordPress
Дополнительный домен в панели ISPManager
Backup сайта в DropBox
Поиск по размеру файла в Ubuntu
Несколько мыслей про Skype
Изменить количество памяти в Mamp Pro php.ini
Akismet и его API key
Обновление url и адрес картинок после изменения адреса блога
Польза простых файлов .bat
Как быстро узнать версию ISPConfig 3 (ssh)
Обвести текст при помощи HTML и CSS
Как сделать в windows 7 в папке «столбцы по размеру содержимого» по умолчанию?
Системные переменные Windows
Joomla/Mambo To WordPress Migrator (5 советов)
Полезные фотосервисы
TimThumb error has occured WordPress
Как в Mac Os X заменить QIP
Добавить html в категорию и страницу
Переезд на новый домен
Разделитель в iSape / Sape
Не показывать виджет iMoney если он пуст
WordPress Super Cache - кто такой?
Как отключить сообщения «системы безопасности» Mac OS X
Метки: , , , , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.