Сегодня мы публикуем важную часть доклада Сергея Людкевича, в которой исчерпывающе разбирается вопрос о том, как и что необходимо учитывать в работе с текстами сайта. Дается алгоритм, следуя которому можно "выжать" максимум релевантности для собственных страниц. Такая коррекция должна быть выполнена до начала работы со ссылками.

Также представляем нового эксперта рассылки Александра Климова и рассказ Юрия Дрогана о программе AddSite Pro, позволяющей значительно облегчить труд по регистрации сайта в поисковых системах и тематических каталогах.

И - традиционно - вопросы и ответы.

(Продолжение. Начало в выпуске 6)

Факторы, зависящие от запроса (динамические).
Внутренние динамические факторы

Внутренние динамические факторы (в нашей формуле они используются при вычислении составляющей T_а(x)) гораздо более легки в понимании, чем показатели авторитетности, хотя бы потому, что доступны для просмотра любому пользователю. Они легко могут быть изменены владельцем ресурса с целью достижения нужных позиций в результатах поиска. Именно поэтому в настоящее время соответствие кода страницы запросу является, пожалуй, наименее слабым фактором в алгоритмах ранжирования поисковых систем, и достичь хороших результатов в ранжировании по серьёзным запросам, основываясь только на работе с внутренними факторами, практически невозможно.

Я не случайно сказал именно "кода страницы", потому что помимо собственно текста к внутренним факторам относятся также элементы форматирования текста и служебные тэги. Итак, по порядку.

Непосредственно текст страницы оценивается поисковой системой по двум основным характеристикам: расположение искомого текста на странице и частота встречаемости слова из запроса в документе по сравнению с другими словами. Что касается расположения текста на странице, то больший вес имеют слова, расположенные ближе к началу документа и предложения. Ведь считается, что в начале чаще располагается важная информация. Также особенно ценится поисковиками "точное вхождение" искомой фразы в текст документа для запросов из нескольких слов, т.е. текст, идентичный запросу, с сохранением порядка слов в запросе. В этой связи хочется отметить вот еще что. Несмотря на то, что поиск по стоп-словам, к которым относятся, в основном, предлоги, союзы, частицы и междометия, не производится, при ранжировании документов они все же используются, что может очень серьезно повлиять на выдачу. Сравните запросы из двух слов с союзом "и" между ними, например "бумага и картон" и "бумага картон".

Тоже можно сказать и о морфологии запроса, предпочтительно, чтобы слова из запроса в тексте были в той же форме, что и в самом запросе. Особенно это касается Рамблера. Для Google это имеет принципиальное значение, так как русской морфологии он не поддерживает.

Кстати, у Рамблера есть еще одна интересная особенность - этот поисковик считает знаки пунктуации словами. Запятая между двумя словами становится третьим словом.

Относительно частоты употребления слов в документе сказано немало. Часто от новичков приходится слышать вопрос об "идеальной" плотности ключевых слов с точностью до сотых процента. Существуют рекомендации об использовании ключевого слова на странице в пределах 3-7%. Однако точные цифры неизвестны. Считается, что страница со слишком часто встречающимся словом запроса может быть сочтена спамом, и ее позиция при этом в результатах поиска автоматически понижается. Это утверждение довольно спорно. Ведь если на странице всего 3 слова и запрос содержит эти же 3, то плотность составит 100%, однако такие страницы прекрасно находятся в поиске. Гораздо более вероятно, что существуют некие пороговые значения, после достижения которых дальнейшее увеличение частоты не влияет на релевантность документа. Представители Апорта, например, определенно говорили о наличии в их поисковой системе подобного порогового значения. Лично я при употреблении слов на странице руководствуюсь прежде всего понятием разумности - пользователю должно быть удобно читать текст - и ни разу не высчитывал эту величину для своих сайтов и сайтов конкурентов.

Кстати, не следует забывать и о том, что поисковые машины накладывают ограничения на индексируемый объем документа. Так, Google индексирует только первые 101 килобайтов, Рамблер - 200 килобайтов, Апорт - 128 килобайтов. По Яндексу у меня такой информации, к сожалению, нет, но, я думаю, что и у него имеется ограничение на индексируемый объем документа примерно в пределах 100-200 килобайт.

Элементы форматирования текста. К таковым относятся заголовки (<h1>, ..., <h6>), а также тэги <strong>, <em>, <b>, <i>. Если некоторая часть текста выделяется, значит, с точки зрения поисковой системы, в этой части содержится более важная информация, следовательно, документ посвящен этой теме и более релевантен запросу, если слова из него, содержатся в выделенном тексте. Поэтому использование этих тэгов в документе желательно, но в разумных количествах. Не стоит забывать, что они используются именно для выделения в пределах одного документа, и слишком частое их использование для различных слов уже не даст такого эффекта. Если весь текст страницы представить заголовком, <h1> например, то это будет равносильно не использованию этого тэга вообще.

Добавлю, что Апортом тэги <i> и <em> игнорируются.

Служебные тэги. Ранее мета-тэги keywords и description активно использовались многими поисковыми машинами. Но в связи с тем, что их содержимое не видно пользователю, они стали действенным инструментом для обмана поисковых систем, что привело к тому, что в настоящее время эти мета-тэги либо вообще не учитываются поисковыми системами, либо влияние их мизерно по сравнению с другими факторами.

Рамблер и Google при ранжировании документов их игнорируют вообще. Однако Google использует содержимое мета-тэга description при построении сниппетов - фрагментов текста, содержащих слова из запроса, выдаваемых рядом со ссылкой на документ в результатах поиска. Апорт единственный использует мета-тег description, но, судя по всему, он имеет очень небольшой вес по сравнению с другими внутренними факторами. Из тэга keywords берутся, по словам представителей Апорта, только 16 слов, причем учитывается только одно вхождение слова, даже если его нет в тексте страницы. На сайте Яндекса указано, что он учитывает первые 50 слов из тэга keywords при условии, что это слово присутствует в тексте страницы, но повторюсь, эффект от его использования крайне мал. Мета-тег description в расчете релевантности страницы запросу в Яндексе не участвует, но до двухсот первых символов из него в некоторых случаях может выводиться в результатах поиска как первая часть аннотации к ссылке. Поэтому я бы рекомендовал использовать в теге description текст, описывающий краткое содержание документа: это может стать дополнительным аргументом для принятия пользователем решения перейти на ваш сайт по ссылке с результатов поиска.

Атрибут alt тэга img. Необходимо упомянуть еще об одном атрибуте, используемом некоторыми поисковыми системами при ранжировании. Это атрибут alt тэга img - текстовый комментарий к изображениям. Rambler учитывает не более 8 слов из него при ранжировании, возможно, приравнивая по значимости к тексту страницы. Этим свойством можно пользоваться при оптимизации страниц. Для Яндекса и Апорта же этот атрибут имеет значение только при поиске по картинкам, а при ранжировании документов в основном поиске не используется. Нами ставились некоторые эксперименты по продвижению через картинки сайтов и их результаты, мягко говоря, нас не удовлетворили - переходов на сайты по картинкам практически не наблюдалось. Google учитывает содержимое этого атрибута только для изображений, являющихся ссылками.

Часто приходится слышать вопросы о том, учитывается ли при ранжировании содержимое атрибута title тэга а. Так вот, на данный момент, ни одной из четырех рассматриваемых в этой статье поисковых машин при ранжировании содержимое этого атрибута не учитывается.

Таким образом, общие рекомендации по оптимизации кода страницы можно свести к следующим мероприятиям:

• Постарайтесь разместить наиболее важные ключевые фразы как можно ближе к началу текста страницы. Обязательно используйте точное следование ключевых слов в фразе друг за другом. По возможности, старайтесь использовать наиболее популярные словоформы.
• Разбивайте текст на логические фрагменты, для которых используйте заголовки и подзаголовки, выделенные с помощью тегов <h1>, ..., <h6>, причем старайтесь по возможности, использовать в них наиболее важные ключевые фразы.
• Выделяйте в тексте наиболее важные ключевые фразы тэгами <strong>, <em>, <b>, <i>, если идеология представления информации на сайте позволяет это делать.
• Разместите наиболее важные ключевые фразы в тэге title. При этом он должен представлять собой вполне читабельный связный текст длиной не более 20-25 слов, а не просто набор ключевых фраз.
• Разместите ключевые фразы в атрибуте alt тэгов img.
• Разместите не более 50 ключевых слов, встречающихся в тексте страницы, в тэге keywords.
• Поместите краткую привлекательную для пользователя аннотацию содержимого страницы в тэге description.

Однако, используя эти рекомендации, не забывайте, что текст документа должен быть удобен для чтения и восприятия пользователем. Не стоит чрезмерно пичкать его ключевыми фразами в надежде повысить их концентрацию. Эффект, который это может принести, несоизмеримо мал по сравнению с риском потерять пользователя, пришедшего на страницу, из-за того, что ему неудобно или неприятно воспринимать ее содержимое. Зачастую бывает достаточно того, чтобы конкретная ключевая фраза хотя бы один раз встречалась в тексте документа. Дальнейшее повышение релевантности документа этому запросу можно проводить за счет воздействия на внешние факторы, влияющие на ранжирование.

(Продолжение следует)

Информация о компании
OOO "Текарт Компьютер", в которой работает автор статьи Сергей Людкевич, образована в 1999 году и специализируется на комплексном и долгосрочном обслуживании клиентов. Выполнено более 160 проектов. 90 клиентов находятся на постоянном обслуживании. Основные направления деятельности:
- маркетинговые исследования и анализ рынков;
- графический дизайн, разработка фирменного стиля, наружная реклама (http://design.techart.ru);
- проектирование, дизайн, разработка, сопровождение веб-сайтов иинтранет-систем (http://www.techart.ru);
- интернет-маркетинг, поисковое продвижение, медиапланирование и проведение рекламных кампаний (http://promo.techart.ru)

Я - веб-дизайнер, и использую только FLash. В этом случае страницы HTML получаются "чистыми" для поисковых систем (кроме ссылки на SWF-документ там ничего нет). Как наполнить HTML-документ так, чтобы он корректно воспринимался поисковыми системами?

Евгений ТРОФИМЕНКО

К сожалению, если кроме Flash-объекта в документе ничего нет, корректно наполнить его индексируемым текстом не получится. Как варианты решения этой проблемы - на Flash можно делать только навигацию, а основной текст страницы писать в html. Второй вариант - создавать альтернативный html - вариант сайта, проставив на него ссылку из Flash-объектов (ссылки индексируются Яндексом и Рамблером).

Андрей ХРОЛЕНОК

Хороший метод, который рекомендуется многими экспертами - делать в конце страницы обычные текстовые ссылки, дублирующие хотя бы основные из доступных через Flash.

Идеальный случай - сделать область на сайте, полностью дублирующую основную по содержанию, но не использующую Flash. Возможно сейчас уже в таких методах нет необходимости, хотя они очень эффективно работают в поисковых машинах.

Наиболее простой метод: сделать с главной страницы ссылку на карту сайта, на которой разместить уже ссылки на все остальные страницы. Такая карта удобна и для добавления Вашего сайта в новый поисковик - достаточно сообщить поисковой машине о месте, где она лежит, чтобы дальнейшая индексация прошла наиболее быстро.

У меня сайт на narod.ru, как можно там создать нормамльный форум наподобии форумf http://forum.moy.ru, и поддерживает ли narod такую функцию?

Евгений ТРОФИМЕНКО

Нет, narod.ru не поддерживает серверные скрипты.

Если сайт содержит фреймы, но во фреймсете, в теге NOFRAMES прописана карта сайта, означает ли это, что поисковики будут ее смотреть и соответствующим образом пробегутся по всем страницам, или же и это не поможет?

Герман ОСТАШЕВСКИЙ

Сегодня все крупнейшие российские поисковые системы уже научились корректно индексировать фреймы, поэтому сайт на фреймах будет проиндексирован даже без тега NOFRAMES.

Размещение карты сайта в теге NOFRAMES лишним также не будет, однако, нужно учитывать, что не все поисковики индексируют содержимое этого тега (Рамблер, например, не индексирует).

Евгений ТРОФИМЕНКО

Яндекс, Апорт, Google индексируют и ищут по тексту из NOFRAMES. Однако, проблема сама по себе кажется надуманной - ведь как правило, в одном из фреймов размещается обычный html-документ с обычными ссылками на все страницы сайта. В настоящее время все популярные поисковики индексируют сайты на фреймах.

Заметьте, что при продвижении сайта на фреймах в поисковиках необходимо позаботиться о том, чтобы заход на внутреннюю страницу сайта приводил бы к загрузке всей фреймовой структуры.

См. также статью Константина Ломкова "Об индексировании поисковыми машинами сайтов на фреймах" с описанием эксперимента по индексации.

У меня сложилось впечатление, что робот Яндекса не возвращается на единожды проиндексированную страницу. С момента регистрации сайта (полгода назад) было изменено название сайта, поменялось содержание титульной страницы, однако, Яндекс выводит содержание страницы с титулом и текстом в момент регистрации сайта в базе поисковика. За главный домен Яндекс выбрал www.mysite.ry (домен условный - для примера) и для того, чтобы заставить робота вновь пройти по всем страницам, начиная с заглавной, где-то месяц назад я вставил в robots.txt строку Host: mysite.ru. Безрезультатно.

Каким образом, не удаляя сайт из базы поисковой машины и не регистрируя его заново, можно добиться переиндексации сайта роботом Яндекса?

Андрей ХРОЛЕНОК

Робот Яндекса возвращается на уже проиндекситрованные страницы - это факт. Если бы он этого не делал, Яндекс бы очень быстро превратился в большую свалку всякого старья.

Единственный надежный способ узнать, когда индексирующий робот был на Вашем сайте - посмотреть в логи, создаваемые автоматически Вашим web-сервером. Каждое обращение к сайту там фиксируется. Если за упомянутые Вами полгода индексирующий робот ни разу не возвращался, стоит бить тревогу и выходить на прямое общение с техподдержкой Яндекса. Однако, скорее всего это не так, и Вам просто надо немного подождать.

Индексирующий робот Яндекса изначально посещает сайт примерно раз в месяц. Однако со временем он может изменять периодичность в том числе и в сторону уменьшения. Если Ваш сайт не обновляется долгое время, робот станет приходить все реже и реже.

Также скорость индексации сайта зависит от его объема в страницах. За один заход индексирующий робот Яндекса берет на индексацию не более 500 страниц. Если Ваш сайт больше, роботу понадобится несколько заходов для полного цикла индексации. При этом периодичность заходов остается прежней.

Евгений ТРОФИМЕНКО

Вы дали недостаточно информации о сайте. Судя по тому, что Вы пишете о выборе главного домена, речь идет о зеркалах одного сайта вида www.mysite.ru и mysite.ru, и о различном виде выдачи для этих двух страниц, а вовсе не о переиндексации всего сайта. На самом деле, Яндекс регулярно переиндексирует сайты (примерно раз в одну-две недели), это можно видеть по дате обновления. В любом случае, для ускорения переиндексации желательно увеличивать цитируемость сайта, ставя ссылки на него.

Для ответа на этот вопрос надо знать, на какую именно страницу направлены ссылки извне. Как правило, страница, имеющая более высокую цитируемость и выбирается главной. Кроме того, важно знать, есть ли у вас на главной странице регулярно обновляемая информация. Если она есть, то Яндекс мог проиндексировать два "варианта" главной страницы в разное время, и они могли иметь разное содержимое. Соответственно, 2 "главных" страницы могут в понимании Яндекса не быть зеркальными.

Герман ОСТАШЕВСКИЙ

Сроки переиндексации сайта зависят прежде всего от количества страниц на сайте и его ссылочной популярности.

Но даже для сайта с нулевой ссылочной популярностью полгода без переиндексации это слишком долгий срок. Ускорить процесс переиндексации непосредственным образом нельзя. Можно только увеличить вероятность захода робота - разместить как можно больше ссылок на страницу и настроить сервер так, чтобы дата последнего изменения документа выдавалась сегодняшним днем.

Сложно сказать, чем вызвана такая большая задержка переиндексации в Вашем случае, не зная адрес сайта. Попробуйте написать письмо в службу поддержки Яндекса по адресу webadmin@yandex.ru

Здравствуйте, уважаемые эксперты.  Недавно я открыл свой новый сайт. Он связан с программированием и его адрес http://www.ishodnik.ru. Недели две назад я зарегистрировал его в поисковых системах Яndex и Rambler. Вроде бы, все сделал как надо (написал ключевые слова в META тегах, в title, в тегах h1 и alt). Однако, при вводе ключевых слов типа "исходники", "Pascal", "C++" и других, я вообще не нахожу свой сайт в результатах поиска. Может быть, вы подскажете, в чем дело?! Заранее спасибо.

Евгений ТРОФИМЕНКО

Ключевые слова в метатегах и тайтле не способствуют быстрой индексации сайта. Способствуют ей наличие ссылок на ваш сайт и наличие счетчика Top100 (для Рамблера). Между индексацией и появлением страниц в выдаче проходит определенное время. Определить, появились ли они в выдаче можно, задав поиск по цитате, URL, или сервиса по определению позиций в Рамблере. Если же сайт проиндексирован, но не появляется в выдаче по этим запросам - это абсолютно нормально. Запросы достаточно конкурентные, одного лишь соответствия страницы запросу недостаточно для продвижения. Кстати, запихивание всех целевых слов в тег title может привести к подозрениям в поисковом спаме.

Контролировать переиндексацию можно, используя логи сервера (внешние счетчики здесь не помогут). Заходы поисковых систем можно определить по запросам с полями USER_AGENT со словами: Yandex, StackRambler, Aport, Googlebot. Также роботов поисковых систем можно отлавливать по IP-адресам.

Андрей ХРОЛЕНОК

Ваш сайт нормально проиндексировался и, в принципе, может быть найден по указанным Вами словам. Вот пример: http://www.yandex.ru/yandsearch?text=%E8%F1%F5%EE%E4%ED%E8%EA%E8&serverurl=ishodnik.ru Причина - в молодости Вашего сайта. Приведенные ключевые слова относятся к высококонкурентным и пробиться в первые ряды результатов поиска по этим словам не так просто.

Вам надо просто немного потерпеть, одновременно занимаясь продвижением своего сайта. В этом, в частности, Вам может помочь содержимое сайта http://www.searchengines.ru

Герман ОСТАШЕВСКИЙ

По конкурентным запросам (а приведенные Вами запросы достаточно конкурентны) недостаточно только оптимизации кода страницы и на первые роли выходит фактор ссылочного ранжирования, то есть присутствие слов запроса в тексте ссылок на страницу...

Составьте для своего сайта грамотные ссылочные блоки и займитесь обменом ссылками с сайтами похожей тематики.

Для Яндекса тоже очень важно присутствие ключевых слов в названии и описании сайта в каталоге Яндекса. Рекомендую Вам зарегистрировать свой сайт в этом каталоге.

Я расскажу о способах регистрации сайта в поисковых системах, а также о программе AddSite Pro 2.0, которая позволяет добавлять сайты в 450+ поисковиков, каталогов и рейтингов Рунета в автоматическом и ручном режиме (официальный сайт - www.addsite.ru). Поставьте на закачку бесплатную ознакомительную версию программы www.addsite.ru/addsite.exe. Она вам скоро пригодится.

Индексироваться необходимо в как можно большем количестве поисковиков и каталогов. Но после регистрации на пяти самых популярных поисковиках, желание работать дальше пропадает. Тому есть несколько причин:

• загрузка форм и их заполнение занимает от 2 до 10 минут, т. е. за час можно обработать не больше 10-20 каталогов;
• приходится постоянно набирать один и тот же текст;
• поиск новых поисковых систем и каталогов также отнимает много времени.

В этих условиях говорить о добавлении сайта в сотни поисковых систем не приходится, это тяжелая ручная работа.

Казалось бы, простая идея - создать систему, в которой регистрация в сотнях каталогов и поисковиков проводилась бы, что называется, "в одно касание", нажатием одной кнопки. Попытки были. Но как бы хороша ни была система автоматической регистрации, она все равно имеет ограниченную точность. Недоверие к автоматам очень распространено и часто - оправдано. При регистрации на крупных поисковиках ошибка может иметь неприятные последствия. На мой взгляд, правильное решение - сочетание ручной и автоматической регистрации. Руками нужно добавить в самые крупные поисковики, а для работы с остальными пользоваться уже системами автоматической регистрации.

Основная причина регистрации сайта в сотнях каталогов, конечно, увеличение количества внешних ссылок на сайт для повышения позиций ссылок на сайт в Яндексе и Рамблере. Никакой другой способ не сможет дать сотни внешних ссылок так легко и легально. Не стоит забывать и о дополнительном трафике с менее известных поисковиков и каталогов. Посещаемость RAX.ru и MavicaNET, например, доходит до 20000 посетителей в день, а WWW.RU, MyWeb.ru, BigMax.ru колеблется около десяти тысяч (данные на осень 2003 года). Хотя, конечно, посещаемость многих мелких каталогов едва достигает 500 посетителей в день.

В российском Интернете систем автоматической регистрации сайта не много. Их можно разделить на онлайновые сервисы и программные решения. 1ps.ru является самым известным онлайн-сервисом. Из программ автоматической регистрации - это AddSite Pro, о которой я сейчас расскажу.

Начинаем работу с AddSite Pro

Перед тем, как начать работу с программой, нужно зарегистрироваться на сервере. После получения временного ключа к программе можем начинать.

В первую очередь необходимо создать описание вашего сайта. При заполнении анкеты о сайте самое сложное - выбор рубрик для автоматической регистрации, поскольку в программе необходимо выбрать для каждого поисковика свою рубрику из списка. Облегчает эту задачу функция подбора рубрик. Стоит указать несколько ключевых слов и нажать кнопку "Подобрать" - и AddSite Pro отметит названия рубрик, в которых содержатся эти слова.

Для работы с сайтами, имеющими англоязычную версию существует специальная закладка.

Детальная регистрация

Когда описание сайта создано, можно переходить непосредственно к регистрации. Разберем сначала детальный или "ручной" способ в программе AddSite Pro. Этот процесс значительно ускоряет привычную ручную регистрацию так как:

• в окне обозревателя сразу открывается форма добавления выбранного поисковика из базы данных программы.
• вам не придется заполнять форму самостоятельно. Выбор "Автозаполнения" приведет к тому, что программа сама заполнит форму, согласно заданной вами анкете о сайте. Останется лишь удостовериться в правильности заполнения и нажать кнопку регистрации.
• можно загрузить до 10 обозревателей одновременно и работать параллельно.

Этот режим рекомендуется для регистрации в крупных поисковиках, а также там, где автоматическая регистрация по каким-либо причинам не проходит.

Автоматическая регистрация

Процесс сабмита сайта в автоматическом режиме очень прост. В разделе "Автоматическая регистрация" выберите сайт и поисковики с каталогами, куда хотите его добавить. Затем нажмите кнопку "Регистрация".

Программа AddSite Pro сама заполнит все необходимые формы на сайте поисковика и сохранит в журнале логины, пароли и HTML-коды кнопок и счетчиков, а также последнюю страницу процесса регистрации, где всегда пишут о результатах добавления или причину неудачи. Вы можете просмотреть эти данные в разделе "Журнал". Там же можно создать и отчет.

С помощью функции горячего поиска вы можете посмотреть на результат регистрации в более чем 200 поисковых системам и каталогах из базы данных программы.

Автоматическая регистрация в сотнях каталогов является необходимой процедурой продвижения сайта. И AddSite Pro - удобный, надежный инструмент для решения этой задачи.

Юрий Дроган
Вопросы автору программы можно задать по адресу support@addsite.ru

Состав экспертов проекта пополнился отличным специалистом с большим стажем практической работы. Представляем.

Александр КЛИМОВ. Менеджер проектов, эксперт компании Mail.Ru. Автор и ведущий рассылок с четырехлетним опытом работы. Автор статей по продвижению сайтов. Mail.RU

Cтатьи, исследования, экспертные ответы и оценки рассылки "Продвижение сайта с опытом экспертов" будут посвящены, прежде всего, тому, что больше интересует вас, наших подписчиков.

Присылайте свои вопросы и пожелания по адресу subscribe@ashmanov.com. Ждем!

Успехов Вам!

Выпуск подготовил Андрей Иванов
"Ашманов и Партнеры"