Думаю, данной небольшой статьёй я опишу последний способ запрета индексации страницы поисковым роботом. Правда, действует он
только для роботов Google (возможно, и для Bing.com, но это пока не так интересно) и представляет из себя специальный серверный заголовок X-Robots-Tag.
Ранее я описывал следующие способы того, как запретить поисковикам индексировать страницу сайта: Читать полностью »