Предотвратяване на индексиране от търсачки и обхождане от ботове в WordPress
WordPress има настройка, която информира търсачките и обхождащите ботове, че сайтът не трябва да се индексира или обхожда. Когато е активирана, мета таговете "noindex, nofollow" ще бъдат добавени към хедъра на сайта Ви и картата на сайта (sitemap) ще бъде премахната от виртуалния файл robots.txt на WordPress. Допълнителни подробности за промените, прилагани от тази настройка, са достъпни в официалната документация на WordPress. Предотвратяването на индексирането от търсачки се използва най-вече за тестови, лични или инсталации на WordPress в процес на разработка.
Важно: Тъй като зависи изцяло от търсачките или обхождащите ботове дали да уважат такива заявки, това решение може да се окаже неефективно в определени ситуации. Ако желаете да ограничите публичния достъп до Вашия WordPress сайт, можете добавите "Защита с парола", така че достъпът до сайта да е възможен само за лица с валидни потребителско име и парола.
Активирането на тази настройка, след като Вашият WordPress сайт вече е бил индексиран, няма да доведе до премахване на индексирането за него. За премахване на вече индексиран сайт трябва да изпратите заявка до търсачката или робота, където сайтът е индексиран.
Можете да управлявате въпросната настройка за индексиране както в таблото за управление на WordPress, така и чрез раздел "WordPress мениджър" в Контролния панел и чрез WP-CLI.
Забраняване на търсачки и ботове да индексират сайта чрез таблото за управление на WordPress
За да поискате от търсачките и ботовете да не индексират сайта Ви чрез таблото за управление на WordPress, трябва да влезете в сайта си като администратор и да отидете в раздел "Настройки" > подраздел "Четене". Поставете отметка за настройката "Видимост на сайта за търсещи машини" и натиснете бутона "Запазване".
Забраняване на индексирането и обхождането на сайта от търсачки чрез WordPress мениджър
Можете да активирате настройката, която не позволява на търсачки и ботове да индексират Вашия WordPress сайт, много лесно чрез хостинг Контролния панел. Всичко, което трябва да направите, е да отворите страницата за управление на Вашата WordPress инсталация в раздел "WordPress мениджър" и да натиснете бутона "Включи" до "Не позволявай на търсачките да индексират този сайт" в раздел "Инструменти".
Забраняване на индексирането на сайта от търсачки чрез WP-CLI
Можете да използвате WP-CLI (инструмент за управление на WordPress инсталации през команден ред), за да изпратите информация до търсачки или ботове, че Вашият WordPress уебсайт не трябва да се индексира. За целта първо трябва да активирате SSH достъп за Вашия акаунт. След това се свържете с него чрез SSH и отидете в директорията на Вашата WordPress инсталация. Например, ще трябва да отидете в директорията "~/www/www" на Вашия акаунт, ако WordPress е инсталиран на Вашия главен домейн. Точната команда за това е:
cd ~/www/www
За да включите настройката "Не позволявай на търсачките да индексират този сайт" за Вашия WordPress блог, използвайте следната WP-CLI команда:
wp option set blog_public 0