Как работают поисковые системы.

Первая базовая истина SEO заключается в том, что поисковые машины не являются людьми. Хотя может казаться на первый взгляд, что нет ни каких различий между человеком и поисковой системой при просмотре веб-страниц. В отличие от людей, поисковые системы являются программами.

Хотя технологии не стоят на месте, поисковые системы еще далеки от интеллектуальных существ, которые могут видеть красоту проектирования сайта, слушать звуки и понимать смысл видио-ролика. Вместо этого поисковые системы сканируют Интернет, смотрят на конкретный сайт (в основном текст), чтобы получить представление, о чем сайт. Это краткое объяснение не является точным, поскольку, как мы увидим дальше, поисковые системы выполняют целый ряд мероприятий с тем чтобы добавить ваш сайт в результаты поиска - сканирование, индексирование и обработка данных, расчет релевантности при выборке.

Во-первых, поисковые системы сканируют Интернет, чтобы узнать, что там есть. Эта задача выполняется программным обеспечением, называемый сканер или поисковый робот-паук. Пауки переходят по ссылкам с одной страницы на другую и индексируют все, что находят на своем пути. На данный момент количество страниц в Интернет (более 20 млрд.), поэтому паук не может посещать каждый сайт ежедневно только для того, чтобы увидеть, что там появилась новая страница или если страница уже существовала, проверить, не изменилась ли она. Иногда роботы-пауки не посещают сайт месяцами, так что в течение этого времени ваши усилия по оптимизации не будут замечены.

Запомните, поисковые роботы-пауки не являются людьми, и они не просматривают картинки, Flash фильмы, JavaScript, фреймы, защищенные паролем страницы и каталоги, расположенные на вашем сайте. А это значит, раз они не могут все это просмотреть, то они не будут их индексировать - одним словом для поисковых систем они как бы не существуют.

После сканирования страницы, следующий шаг состоит в том, чтобы индексировать ее содержание. Индексируемые страницы хранится в гигантские базах данных, откуда она впоследствии могут быть восстановлены. По сути, процесс индексирования заключается в определении слов и выражений, которые лучше всего описывают страницу и присвоения страницы определенным ключевым словам. Человек не может обрабатывать такое количество информации, а поисковые системы замечательно справляются с этой задачей.

Иногда они все же не могут понять смысл содержания, какой ни будь страницы, и ваша задача помочь им в этом путем оптимизации, после правильной оптимизации им будет легче классифицировать ваши страницы правильно, а вам - легче достигнуть высоких позиций в рейтингах.

Когда поступает поисковый запрос, поисковая система сравнивает строку поиска в поисковом запросе со своей базой проиндексированных страниц. Поскольку существует вероятность того, что данные, подходящие под этот запрос содержится более чем на одной странице (фактически это миллионы страниц), поисковая система начинает расчет релевантности каждой из страниц в индексе для текущего поискового запроса. И на основе расчета релевантности выдает вам результаты запроса.

Существуют различные алгоритмы расчета релевантности. Каждый из этих алгоритмов в различных системах рассчитывается по-разному, на расчет релевантности могут влиять такие общие факторы, как плотность ключевых слов, количество ссылок на сайт или метатеги. Именно поэтому различные поисковые системы дают разные результаты поиска страниц для одного и того же поискового запроса. Более того, это известный факт, что все основные поисковые системы, как Yandex, Rambler, Yahoo, Google, MSN и т.д. периодически меняют свои алгоритмы, и если вы хотите держаться на вершине, вам также необходимо адаптировать свои страницы под их последние изменения. Это одна из причин для того, что бы постоянно заниматься SEO, если вы, конечно, хотите быть на первых позициях.

Последним шагом в деятельности поисковых системах является выдача результатов их трудов. В принципе, это не более чем просто отображение их в браузере - то есть бесконечные страницы результатов поиска, которые сортируются по убыванию от наиболее актуальных с точки зрения поисковой системы к наименее релевантным сайтам.