В WordPress можно запрещать поисковикам индексировать отдельные записи блога, добавляя метатег "robots" с noindex c помощью произвольного поля (custom field)
Читать
Запрет индексации отдельных записей блога
Архив метки: meta-тег
Индексация: использование noindex, nofollow, robots и др.
На индексацию веб-страниц можно влиять по-разному. Кроме задания специальных директив в файле robots.txt используются noindex, nofollow, robots и др. элементы в коде веб-страницы.
Читать