пишет:
Здравствуйте, Друзья. Огромное количество опубликованных статей о правильном составлении файла robots приводило к мысли о нецелесообразности выкладывания еще одной записи на эту тему, только уже со страниц своего блога.
Однако просматривая форумы,замечаю, что актуальность вопроса не снижается. С чем это связанно — вопрос десятый, но послужило написанию данной заметки.
Передавая блог в щупальца поисковых систем для прохождения таинства индексации, мы все надеемся на безошибочное завершение процесса. Печально становится, когда после кропотливо проделанной работы видим предупреждение, что:
Когда мы проверили несколько URL из вашего файла Sitemap, то обнаружили, что файл robots.txt для сайта блокирует доступ к некоторым URL. Если вы не планируете заблокировать некоторые URL, содержащиеся в файле Sitemap, воспользуйтесь нашим инструментом для анализа файла robots.txt, чтобы убедиться в том, что робот Google может перейти по отправленным вами URL. Все доступные URL будут по-прежнему отправляться.
Вступите в группу, и вы сможете просматривать изображения в полном размере
Это интересно
0
|
|||
Последние откомментированные темы: