Работа поисковых систем: общие принципы работы поисковиков

Вступление

Каждая поисковая система имеет свой алгоритм поиска запрашиваемой пользователем информации. Алгоритмы эти сложные и чаще держатся в секрете. Однако общий принцип работы поисковых систем можно считать одинаковым. Любой поисковик:

• Сначала собирает информацию, черпая её со страниц сайтов и вводя её в свою базы данных;
• Индексирует сайты и их страницы, и переводит их из базы данных в базу поисковой выдачи;
• Выдает результаты по поисковому запросу, беря их из базы проиндексированных страниц;
• Ранжирует результаты (выстраивает результаты по значимости).

Работа поисковых систем — общие принципы

Вся работа поисковых систем выполняют специальные программы и комбинации этих программ.

Перечислим основные составляющие алгоритмов поисковых систем:

• Spider (паук) – это браузероподобная программа, скачивающая веб-страницы. Заполняет базу данных поисковика.
• Crawler (краулер, «путешествующий» паук) – это программа, проходящая автоматически по всем ссылкам, которые найдены на странице.
• Indexer (индексатор) – это программа, анализирующая веб-страницы, скачанные пауками. Анализ страниц сайта для их индексации.
• Database (база данных) – это хранилище страниц. Одна база данных это все страницы загруженные роботом. Вторая база данных это проиндексированные страницы.
• Search engine results engine (система выдачи результатов) – это программа, которая занимается извлечением из базы данных проиндексированных страниц, согласно поисковому запросу.
• Web server (веб-сервер) – веб-сервер, осуществляющий взаимодействие пользователя со всеми остальными компонентами системы поиска.

Реализация механизмов поиска у поисковиков может быть самая различная. Например, комбинация программ Spider+ Crawler+ Indexer может быть создана, как единая программа, скачивающая и анализирующая веб-страницы и находящая новые ресурсы по найденным ссылкам. Тем не менее, нижеупомянутые общие черты программ присущи всем поисковым системам.

Программы поисковых систем

Spider

«Паук» скачивает веб-страницы так же как пользовательский браузер.  Отличие в том, что браузер отображает содержащуюся на странице текстовую, графическую или иную информацию, а паук работает с html-текстом страницы напрямую, у него нет визуальных компонент. Именно, поэтому нужно обращать внимание на ошибки в html кодах страниц сайта.

Crawler

Программа Crawler, выделяет все находящиеся на странице ссылки. Задача программы вычислить, куда должен дальше направиться паук, исходя из заданного заранее, адресного списка или идти по ссылках на странице. Краулер «видит» и следует по всем ссылкам, найденным на странице и ищет новые документы, которые поисковая система, пока еще не знает. Именно, поэтому, нужно удалять или исправлять битые ссылки на страниц сайта и следить за качеством ссылок сайта.

Indexer

Программа Indexer (индексатор) делит страницу на составные части, далее анализирует каждую часть в отдельности. Выделению и анализу подвергаются заголовки, абзацы, текст, специальные служебные html-теги,  стилевые и структурные особенности текстов, и другие элементы страницы. Именно, поэтому, нужно выделять заголовки страниц и разделов мета тегами (h2-h5,h5,h6), а абзацы заключать в теги <p>.

Database

База данных поисковых систем хранит все скачанные и анализируемые поисковой системой данные. В базе данных поисковиков хранятся все скачанные страницы и страницы, перенесенные в поисковой индекс. В любом инструменте веб мастеров каждого поисковика, вы можете видеть и найденные страницы и страницы в поиске.

Search Engine Results Engine

Search Engine Results Engine это инструмент (программа) выстраивающая страницы соответствующие поисковому запросу по их значимости (ранжирование страниц). Именно эта программа выбирает страницы, удовлетворяющие запросу пользователя, и определяет порядок их сортировки. Инструментом выстраивания страниц называется алгоритм ранжирования системы поиска.

Важно! Оптимизатор сайта, желая улучшить позиции ресурса в выдаче, взаимодействует как раз с этим компонентом поисковой системы. В дальнейшем все факторы, которые влияют на ранжирование результатов, мы обязательно рассмотрим подробно.

Web server

Web server поисковика это html страница с формой поиска и визуальной выдачей результатов поиска.

Повторимся. Работа поисковых систем основана на работе специальных программ. Программы могут объединяться, компоноваться, но общий принцип работы всех поисковых систем остается одинаковым: сбор страниц сайтов, их индексирование, выдача страниц по результатам запроса и ранжирование выданных страниц по их значимости. Алгоритм значимости у каждого поисковика свой.

©SeoJus.ru

Другие уроки SEO учебника

(Всего просмотров 691)

Поделиться ссылкой:

Похожее

Принцип работы поисковых систем — Академия SEO (СЕО)

Принцип работы поисковой системы

Если Вы выбрали для своего сайта SEO-продвижение, желательно изначально понять принцип работы поисковых систем (ПС) для получения положительных результатов. Это поможет построить собственную стратегию оптимизации Вашего ресурса под нужные поисковые запросы так, чтобы наверняка оказаться на первой странице выдачи поисковика.

Основные задачи ПС

1. Дать пользователю правильный ответ на введенный в строку поиска запрос и тем самым удовлетворить его, чтобы не дать повода воспользоваться конкурирующей ПС. Для этого в ТОП 10 поиска должны быть результаты максимально подходящие под запрос пользователя.
    

   

    

2. Обеспечить монетизацию трафика. То есть в первую очередь выдать результат, который будет способствовать получению прибыли владельцем сайта, например, с помощью контекстной рекламы.

Как работает поисковая система?

Поисковых систем на сегодняшний день достаточно много. Естественно, что в каждой из них поиск построен на собственных алгоритмах, но в общем принцип работы поисковых машин довольно похож.

В тот момент, когда Вы создали сайт и бот одной из поисковых систем узнал об этом (в результате закупки ссылок или любым другим способом), он «приходит и начинает бродить» по страничкам. 

Принцип работы поисковых роботов базируется на выполнении нескольких этапов:

1. Сбор данных. С помощью ботов ПС собирает необходимую информацию со всех страничек ресурса (тексты, изображения, видео и др.). 
   Эти процессы начинается после запуска сайта и в дальнейшем происходят по составленному роботом расписанию. Благодаря этому время от времени происходит обновление данных о страницах на предмет изменений.
    
2. Индексация – присвоение каждой странице определенного индекса, который позволит производить быстрый поиск по их содержимому. 

С этого момента Ваш ресурс или некоторые его страницы могут быть отображены на страницах выдачи поисковика по отдельным запросам. Ну а то на какой странице он окажется  зависит от уровня его оптимизации.

Основные принципы ранжирования сайтов в поисковых системах

Для того, чтобы Ваш сайт попал в ТОП 3, ну или хотя бы в ТОП 10 необходимо знать все основные критерии поисковых систем и стараться оптимизировать его таким образом, чтобы он им соответствовал. Эти критерии можно разделить на две основные группы:

• текстовые;
• нетекстовые.

Текстовые критерии ПС

В этом случае ранжирование сайта основывается на оценке качества текстового содержимого страниц. Работа с ними производится на этапе создания семантического ядра сайта и наполнения его текстовым контентом.

Подразумевается, что ПС выдает на первой странице поиска результаты, наиболее соответствующие запросу пользователя.  То есть их содержимое наиболее точно соответствует необходимым критериям и должно удовлетворить его. Также при этом обращается внимание на правильность заполнения титульной фразы (title), описания страницы (description) и наличие ключевого запроса в заголовках (h2, h3 и т. д.). Об этом подробнее Вы узнаете в отдельных статьях.

Нетекстовые критерии ПС

Работа с ними происходит после публикации сайта и его индексации. Принципы определения рейтинга Интернет-ресурсов на основе нетекстовых критериев базируются не на оценке качества их содержания. Они содержат несколько иные факторы ранжирования сайта —  оценку внешнего ссылочного профиля.

Система работает по принципу учета количества ссылок на Ваш ресурс, оценка авторитетности ссылающихся ресурсов, проверка регистраций в каталогах сайтов. 
Можно провести аналогию с выводами о качестве определенного товара на основе отзывов потребителей, поставщиков, продавцов и т. д.

 

Выводы для тех, кто создает и продвигает сайты

Досконально изучив принцип работы поисковых систем и отслеживая нововведения в них, Вы научитесь создавать сайты, которые будут без проблем попадать на первые страницы результатов поиска. И самое главное – они смогут долго оставаться на этих позициях, поскольку в полной мере будут соответствовать запросам пользователей.

 

Принципы работы поисковых систем

Принцип работы поисковых систем

Принцип работы поисковых систем очень простой, понятный и состоит из двух этапов, которые мы с вами разберём.

1 этап: Ввод поискового запроса

Открываем любую поисковую систему: Яндекс, Google, Mail или Rambler. Затем в «поле для поиска» вводим необходимый запрос запрос. Ну а затем нажимаем кнопку «поиска».

2 этап: Страница с результатами поиска (SERP)

После того, как вы ввели поисковый запрос, система начинает анализировать все доступные результаты, которые подходят под ваш запрос. Из всех результатов, система выбирает наиболее точные и близкие по смыслу результаты, то есть система выбирает для ваш самые лучшие результаты.

Обратите внимание: поисковые системы определяют какой сайт лучше или хуже не в реальном времени, а по сохранённым материалам, которые хранятся в поисковой базе.

После сортировки результатов, система начинает генерировать страницу «с результатами поиска», на которой будут отображены подходящие для вас результаты. Или как ее еще называют — SERP.

Важный момент: результаты поиска отображаются сверху вниз, от самых лучших до худших.

SERP (Search engine result page) — страница результатов поиска, которая может быть сгенерирована любой поисковой системой (машиной). То есть, это выдача ссылок на тексты, фотографии, видео или иллюстрации с кратким их описанием, которые соответствуют вашему поисковому запросу.

Страница результатов поиска

Страницу результатов поиска система генерирует автоматически, основываясь на свою поисковую базу и рекламу. На странице результатов поиска присутствуют не только лучшие результаты по вашему запросу, но а так же есть и реклама.

Очень часто поисковая система размещает рекламные блоки перед основными результатами поиска и после.

Страница результатов поиска, может отличаться у разных поисковых систем. Для наглядности рассмотрим страницы с результатами поиска у поисковых систем: Яндекс, Google, Mail и Rambler.

Страница результатов поиска Яндекс

На странице с результатами поиска в поисковой системе «Яндекс» отображается: поисковый запрос, 2 рекламных блока и поисковая выдача (результаты по нашему запросу).

Страница результатов поиска Google

На странице с результатами поиска в поисковой системе «Google» отображается: поисковый запрос, 2 рекламных блока и поисковая выдача (результаты по нашему запросу).

Страница результатов поиска Mail

На странице с результатами поиска в поисковой системе «Mail» отображается: поисковый запрос, 2 рекламных блока и поисковая выдача (результаты по нашему запросу).

Страница результатов поиска Rambler

На странице с результатами поиска в поисковой системе «Rambler» отображается: поисковый запрос, 2 рекламных блока и поисковая выдача (результаты по нашему запросу).

Вывод по страницам результатов поисковых систем

У всех поисковых систем которые мы рассмотрели, страница с результатами имеет одинаковую структуру и отличается она лишь количеством ссылок в блоках с рекламой.

С уважением, Артём Санников

Сайт: ArtemSannikov.ru

Теги: Google, Mail, Rambler, Seo, Yandex, Основы.

Принцип работы поисковых систем в глобальной сети интернет

Здравствуйте, уважаемые читатели!

Поисковых систем в мировом интернет-пространстве в настоящий момент достаточно много. У каждой из них имеются собственные алгоритмы индексирования и ранжирования сайтов, но в целом принцип работы поисковиков довольно похож.

Знания о том, как работает поисковая система в условиях стремительно растущей конкуренции являются весомым преимуществом при продвижении не только коммерческих, но и информационных сайтов и блогов. Эти знания помогают выстраивать эффективную стратегию оптимизации сайта и с меньшими усилиями попадать в ТОП выдачи по продвигаемым группам запросов.

Содержание:

Принципы работы поисковых систем

Смысл работы оптимизатора состоит в том, чтобы «подстроить» продвигаемые страницы под поисковые алгоритмы и, тем самым, помочь этим страницам достичь высоких позиций по определенным запросам. Но до начала работ по оптимизации сайта или блога необходимо хотя бы поверхностно разбираться в особенностях работы поисковых систем, чтобы понимать, как они могут реагировать на предпринимаемые оптимизатором действия.

Разумеется, детальные подробности формирования поисковой выдачи – информация, которую поисковые системы не разглашают. Однако, для правильных усилий по продвижению сайта достаточно понимания главных принципов, по которым работают поисковые системы.

Методы поиска информации

Два основных метода, используемых сегодня поисковыми машинами, отличаются подходом к поиску информации.

1. Алгоритм прямого поиска, предполагающий сопоставление каждому из документов, сохраненных в базе поисковой системы, ключевой фразы (запроса пользователя), является достаточно надежным методом, который позволяет найти всю необходимую информацию. Недостаток этого метода заключается в том, что при поиске в больших массивах данных время, требуемое для нахождения ответа, достаточно велико.
2. Алгоритм обратных индексов, когда ключевой фразе сопоставляется список документов, в которых она присутствует, удобен при взаимодействии с базами данных, содержащими десятки и сотни миллионов страниц. При таком подходе поиск производится не по всем документам, а только по специальным файлам, включающим списки слов, содержащихся на страницах сайтов. Каждое слово в подобном списке сопровождается указанием координат позиций, где оно встречается, и прочих параметров. Именно этот метод применяется сегодня в работе таких известных поисковых систем, как Яндекс и Гугл.

Здесь следует отметить, что при обращении пользователя к поисковой строке браузера поиск производится не непосредственно в интернете, а в предварительно собранных, сохраненных и актуальных на данный момент базах данных, содержащих обработанные поисковиками блоки информации (страницы сайтов). Быстрое формирование результатов поиска возможно именно благодаря работе с обратными индексами.

Текстовое содержимое страниц (прямые индексы) поисковыми машинами тоже сохраняется и используется при автоматическом формировании сниппетов из наиболее подходящих запросу текстовых фрагментов.

Математическая модель ранжирования

С целью ускорения поиска и упрощения процесса формирования выдачи, максимально отвечающей запросу пользователя, применяется определенная математическая модель. Задача этой математической модели — нахождение нужных страниц в актуальной базе обратных индексов, оценка их степени соответствия запросу и распределение в порядке убывания релевантности.

Простого нахождения нужной фразы на странице недостаточно. При определении релевантности поисковиками применяется расчет веса документа относительно пользовательского запроса. По каждому запросу этот параметр рассчитывается на основе следующих данных: частоты использования ключевого слова на анализируемой странице и коэффициентом, отражающим насколько редко встречается это же слово в других документах базы данных поисковика. Произведение этих двух величин и соответствует весу документа.

Разумеется, представленный алгоритм является весьма упрощенным, поскольку в распоряжении поисковых машин есть ряд других дополнительных коэффициентов, используемых при расчетах, но смысл от этого не меняется. Чем чаще отдельное слово из запроса пользователя встречается в каком-либо документе, тем выше вес последнего. При этом текстовое содержимое страницы признается спамным, если будут превышены определенные пределы, являющиеся для каждого запроса различными.

Основные функции поисковой системы

Все существующие системы поиска призваны выполнять несколько важных функций: поиск информации, ее индексирование, качественную оценку, правильное ранжирование и формирование поисковой выдачи. Первоочередная задача любого поисковика – предоставление пользователю той информации, которую он ищет, максимально точного ответа на конкретный запрос.

Поскольку большинство пользователей понятия не имеют о том, как работают поисковые системы в интернете и возможности обучить пользователей «правильному» поиску весьма ограничены (например, поисковыми подсказками), разработчики вынуждены улучшать сам поиск. Последнее подразумевает создание алгоритмов и принципов работы поисковых систем, позволяющих находить требуемую информацию независимо от того, насколько «правильно» сформулирован поисковый запрос.

Сканирование

Это отслеживание изменений в уже проиндексированных документах и поиск новых страниц, которые могут быть представлены в результатах выдачи на запросы пользователей. Сканирование ресурсов в сети интернет поисковики осуществляют с помощью специализированных программ, называемых пауками или поисковыми роботами.

Сканирование интернет-ресурсов и сбор данных производится поисковыми ботами автоматически. После первого посещения сайта и включения его в базу данных поиска, роботы начинают периодически посещать этот сайт, чтобы отслеживать и фиксировать произошедшие в контенте изменения.

Поскольку количество развивающихся ресурсов в интернете велико, а новые сайты появляются ежедневно, описанный процесс не останавливается ни на минуту. Такой принцип работы поисковых систем в интернете позволяет им всегда располагать актуальной информацией о доступных в сети сайтах и их контенте.

Основная задача поискового робота – поиск новых данных и передача их поисковику для дальнейшей обработки.

Индексирование

Поисковая система способна находить данные только на сайтах, представленных в ее базе – иначе говоря, проиндексированных. На этом шаге поисковик должен определить, следует ли найденную информацию заносить в базу данных и, если заносить, то в какой из разделов. Этот процесс также выполняется в автоматическом режиме.

Считается, что Google индексирует почти всю доступную в сети информацию, Яндекс же к индексации контента подходит более избирательно и не так быстро. Оба поисковых гиганта рунета работают на благо пользователя, но общие принципы работы поисковой системы Гугл и Яндекс несколько отличаются, так как основаны на уникальных, составляющих каждую систему программных решениях.

Общим же для поисковых систем моментом является то, что процесс индексирования всех новых ресурсов занимает более продолжительное время, чем индексирование нового контента на известных системе сайтах. Информация, появляющаяся на сайтах, доверие поисковиков к которым высоко, попадает в индекс практически моментально.

Ранжирование

Ранжирование – это оценка алгоритмами поисковика значимости проиндексированных данных и выстраивание их в соответствии c факторами, свойственными данному поисковику. Полученная информация обрабатывается с целью формирования результатов поиска по всему спектру пользовательских запросов. То, какая именно информация будет представлена в результатах поиска выше, а какая ниже, полностью определяется тем, как работает выбранная поисковая система и ее алгоритмы.

Сайты, находящиеся в базе поисковой системы, распределяются по тематикам и группам запросов. Для каждой группы запросов формируется предварительная выдача, подвергающаяся в дальнейшем корректировке. Позиции большинства сайтов изменяются после каждого апдейта выдачи — обновления ранжирования, которое в Google происходит ежедневно, в поиске Яндекса – раз в несколько дней.

Человек как помощник в борьбе за качество выдачи

Реальность такова, что даже самые продвинутые системы поиска, такие как Яндекс и Гугл, на данный момент все еще нуждаются в помощи человека для формирования выдачи, соответствующей принятым стандартам качества. Там, где поисковый алгоритм срабатывает недостаточно хорошо, результаты его корректируются вручную – путем оценки содержимого страницы по множеству критериев.

Многочисленной армии специально обученных людей из разных стран – модераторов (асессоров) поисковых систем – приходится ежедневно выполнять огромный объем работы по проверке соответствия страниц сайтов пользовательским запросам, фильтрации выдачи от спама и запрещенного контента (текстов, изображений, видео). Работа асессоров позволяет делать выдачу чище и способствует дальнейшему развитию самообучающихся поисковых алгоритмов.

Заключение

С развитием сети интернет и постепенным изменением стандартов и форм представления контента меняется и подход к поиску, совершенствуются процессы индексирования и ранжирования информации, используемые алгоритмы, появляются новые факторы ранжирования. Все это позволяет поисковым системам формировать наиболее качественную и адекватную запросам пользователя выдачу, но при этом усложняет жизнь вебмастерам и специалистам, занимающимся продвижением сайтов.

В комментариях под статьей предлагаю высказаться о том, какая из основных поисковых систем рунета – Яндекс или Гугл, по вашему мнению, работает лучше, предоставляя пользователю более качественный поиск, и почему.

Принципы работы поисковых систем. Ранжирование сайтов в выдаче

Здравствуйте друзья! Каждодневно для поиска нужной нам информации, мы используем поисковые системы, в основном Яндекс и Google. Принципы работы поисковых систем примерно одинаковые, вот о них сегодня и поговорим.

Данный материал, наверное больше предназначен для новичков, в нем не будет заумных фраз и формул, постараюсь простыми словами и примерами объяснить по какому принципу работают все популярные поисковые системы.

Содержание статьи

Принципы работы поисковых систем

В нашем быстроразвивающемся информационном мире, задачей поисковых систем является выдача наиболее полезной и нужной информации для пользователя по его запросу.

Для примера в поисковой строке Яндекс наберем запрос «как сделать сайт» и увидим такую картину:

Выдача в поисковой системе Яндекс

Нам показывается поисковая выдача, или так называемый SERP — страница сгенерированная поисковой машиной. На первых местах в выдаче (обычно это три первые позиции) находятся сайты, которые заплатили деньги за контекстную рекламу. Все, что находится ниже рекламных блоков называется органическим поиском.

На первой страницы выдачи, сразу после рекламы (ее может и не быть) находятся десять сайтов, которые наиболее точно, отвечают нашему запросу.

Ниже этих cайтов снова идет блок рекламы и навигация по страницам, с помощью которой можно перейти к следующим сайтам поисковой выдачи.

Но туда мало кто ходит, т.к. по статистике более 75% пользователей находит нужную информацию именно на первой странице в основной поисковой выдачи. А из этих людей 80% переходят на сайты находящиеся в первой пятерке, игнорируя рекламные блоки. Отсюда можно сделать вывод, что именно эти сайты собирают весь поисковый трафик и наша цель попасть в первую десятку, а лучше пятерку.

Я надеюсь немного стал понятен принцип работы поисковых систем. Чтобы попасть на первые три позиции надо заплатить денег (зачастую немалые) и сделать рекламную компанию в Яндекс Директ. А чтобы оказаться в первой десятке органического поиска необходимо чтобы Яндекс или Google посчитали, что конкретная страница нашего сайта наиболее точно соответствует введенному пользователем поисковому запросу.

Как поисковая система ищет информацию

Надо понимать, что поисковая система не в реальном времени определяет какие сайты лучше, а какие хуже для выдачи. Для этого существуют поисковые роботы, которые постоянно ходят по сайтам и сохраняют все посещенные страницы в базу данных поиска. Далее уже в поисковой базе происходит индексация сохраненных страниц, в процессе которой оценивается качество контента на странице.

Если Вы не хотите, чтобы некоторые страницы или каталоги Вашего сайта попали в поисковую выдачу, можно принудительно запретить их индексацию. Поисковые роботы в этом случае не будут заносить в базу такие страницы. Как получить доверие роботов поисковых систем можно прочитать в моей одноименной статье здесь.

Я думаю стало понятно, что если на странице присутствует введенная пользователем поисковая фраза, то есть вероятность того, что Ваша страница попадет в поисковую выдачу. Но давайте посмотрим сколько раз в месяц пользователи набирали такой запрос в поисковой системе Яндекс. Сделать это можно с помощью сервиса wordstat.yandex.ru:

Сервис Яндекс Вордстат

Мы видимо что сочетание слов «как сделать сайт» в той или иной форме люди искали более 123 тыс. раз., а это очень большое количество. Но какие же конкретно страницы сайта поисковые системы будут ставить на первое место, а какие на последнее?

Ранжирование сайтов

После того, как произошел отбор сайтов под введенный поисковый запрос, документы ранжируюся, т.е. расставляются в приоритетном порядке сверху вниз. По словам Яндекса, существует более 700 показателей влияющих на приоритетность расстановки страниц в поисковой выдачи. Естественно, что данный алгоритм является коммерческой тайной.

Но на некоторые показатели ранжирования мы можем повлиять сами. Данные показатели можно разделить на внутренние, внешние и поведенческие.

Внутренние показатели

К группе внутренних показателей относится текст статьи, правильность его написания с точки зрения сео продвижения. Ответы на вопросы как правильно написать статью, чтобы она попала в верхние строчки выдачи найдете в посте Основные правила SEO-оптимизации статьи. Также к внутренним факторам относится правильная перелинковка сайта, ссылки внутри сайта, правильность оформления картинок в статье, юзабилити сайта.

Внешние показатели

В эту группу входят факторы определяющие популярность сайта по мнению сторонних интернет ресурсов. Проще говоря, чем больше Ваш сайт засветился в интернет пространстве, чем больше на него ссылаются другие ресурсы, тем лучше его сео показатели.

Сюда же причисляется активность пользователей на Ваши статьи в социальных сетях, репосты и лайки. Поэтому не жадничайте и всегда после написания статьи делитесь ею во всех социальных сетях.

Поведенческие показатели

Данные показатели вносят свою лепту в принципы работы поисковых систем. Чем интереснее Ваши статьи для пользователя, чем больше он переходит по ссылкам, а это определяется временем нахождения на сайте и показателями отказов, тем лучше поисковик ранжирует Ваш сайт и повышает его рейтинг.

Для анализа поведенческих показателей используется информация полученная от счетчиков, установленных на Вашем сайте, поэтому не пренебрегайте этими инструментами.

Теперь Вам известны принципы работы поисковых систем и как работает выдача. Желаю всем удачи в поисковой оптимизации и продвижение сайтов.

Полезную информацию по данной теме можете прочитать в моих статьях:

---

С Уважением Дмитрий Леонов | leonov-do.ru

Рекомендую прочитать похожие статьи:

принцип работы поисковых систем

Всем привет. Прежде чем начинать продвигать сайт в поисковых системах необходимо понять принципы работы этих самых систем. Вернемся к основам и узнаем каким же образом работает поисковая система.

Любая поисковая система состоит из следующих компонентов:

Spider (паук)-программа которая скачивает все веб-страницы сайта. В чем-то она похожа на обыкновенный браузер, только работает она напрямую с html-кодом страницы. Ее основная задача найти как можно больше информации на сайте, которая в дальнейшем будет обрабатываться другими алгоритмами поисковой системы.

Crawler (краулер)-программа, которая проходит по всем ссылкам, которые она находит на странице. Она определяет, куда дальше должен идти паук, и находит новые документы, которые еще не известны поисковой системе. В том случае, если есть xml карта сайта, то он проходит по всем ссылкам найденным в ней, определяя какие именно страницы нужно проиндексировать.

Indexer (индексатор)-разбивает страницу скачанную пауком на составляющие, анализирует их и заносит в базу данных. Все это называется одним словом «индексация». Существует несколько способов для того, чтобы ускорить индексацию сайта в поисковых системах.

Database (база данных)-место где хранятся скачанные и обработанные страницы.

Web server (веб-сервер)-сервер, осуществляющий взаимодействие между пользователем и всеми остальными компонентами поисковой системы. Ее Вы видите каждый раз, когда заходите на страницу поиска.

Search engine results engine (система выдачи)-это самая главная часть любой поисковой системы, её ядро, определяющее принцип ее работы. Каждый вопрос, который пользователь задает поисковой системе, она анализирует, и, после этого, находит в индексе документ, который полностью на этот вопрос отвечает.

Для того, чтобы решить какой документ больше всего подходит для ответа на запрос пользователя система выдачи анализирует:

• Заголовок страницы. Заголовок страницы это текст, расположенный в теге <title>. Заголовок должен как можно ближе отображать содержание страницы. В том случае, если в заголовке страницы встречаются ключевые слова из запроса, поисковая система считает, что документ соответствует запросу, и у появляются хорошие шансы попасть в выдачу поисковой системы.

• Плотность ключевых слов на странице. Поисковая система также следит за количеством употреблений слов из ключевого запроса на странице. Для того, чтобы страница отвечала на запрос и попала в выдачу, необходимо, чтобы слова из поискового запроса встречались на странице в определенной концентрации.

• Употребление ключевых слов в подзаголовках. Слова из поискового запроса должны встречаться в подзаголовках документа.

• Внешние и внутренние ссылки на документ. Это так называемые ссылочные факторы ранжирования. Если на документ ссылаются с других страниц сайта, а также с других сайтов, это сигнал для поисковой системы о том, что эта страница отвечает запросу. При этом слова из запросов должны встречаться в якорях ссылок. Это очень важно!

• Поведенческие факторы. Были введены в поисковые алгоритмы недавно. В настоящий момент активно развиваются. Основной смысл в том, что поисковая система оценивает поведение пользователей, пришедших на страницу, и по нему судит о качестве информации, представленной на сайте. К примеру, если очень много людей перейдя на страницу сразу же уходит с нее, и продолжает искать информацию на других сайтах поисковая система считает, что данная страница не имеет большой ценности и понижает ее в выдаче по данному ключевому слову.

Разумеется я рассказал не всех факторах ранжирования поисковых систем. В реальности их намного больше. Я перечислил только самые основные. Подробнее о том, как продвигать сайты в поисковых системах ты можешь узнать на страницах моего сайта. Так что не забывай подписываться на RSS.

Принципы работы поисковых систем

В этой статье я вам расскажу принцип работы поисковых систем. Думаю, данная публикация будет полезна не только начинающим seo-оптимизаторам, но тем владельцам сайтов, которые уже имеют небольшой опыт в раскрутке своих проектов. Почему я так считаю? Дело в том, что сейчас в интернете можно встретить достаточно большое количество блоггеров, которые, в принципе, знают какие-то правила оптимизации, они покупают ссылки, пишут оптимизированные статьи и т.д. Но далеко не все они знают, по какому принципу работают все поисковые системы, что, как мне кажется, очень сильно мешает им понять все тонкости раскрутки сайтов. Хотя я считаю, что первое, что должен узнать начинающий seo-оптимизатор это то, как работают поисковые системы. И в этой статье я постараюсь максимально подробно об этом рассказать.

Естественно, я буду говорить только о самом принципе работы поисковиков, а все вопросы технического характера (работа алгоритма) затрагиваться не будут. Потому как, во-первых, эти алгоритмы держатся в строгой тайне, и никто кроме самих разработчиков поисковых систем их не знает, а во-вторых, они (алгоритмы) постоянно меняются и если, даже кому-то удастся узнать, как все работает, через некоторое время (1-2 недели) эта информация уже будет не актуальной. Но обо всем по порядку. Итак, начнем!

Первое что вы должны понять так это то, что все поисковые системы являются так называемыми «индексирующими» поисковиками. То есть, они выполняют поиск исключительно по своей базе данных, которая строится специальной программой, называемой поисковым роботом (или как ее еще называют индексатор, паук, кроулер, бот, червяк).

Получается, когда человек только создал сайт, ему необходимо подождать некоторое время чтобы поисковый робот нашел его ресурс и загрузил к себе в индекс (базу данных) и только после этого сайт будет участвовать в поиске. Так же каждая поисковая система предоставляет возможность пользователю добавить свой ресурс в очередь на индексацию в ручном режиме, используя для этого специальную форму добавления адресов. Но главное не это, главное чтобы вы поняли, что когда пользователь вводит в «поисковик» какой-то запрос поисковая система ищет информацию исключительно по своей базе данных. То есть она не перелопачивает весь интернет, чтобы показать вам страницы с необходимой информацией, она работает в рамках своей базы данных. Это очень важно понимать.

Этот принцип работы поисковых систем дает возможность искать информацию практически мгновенно. Мало того, благодаря ему имеется возможность показать пользователю максимально качественный результат выдачи, за счет предварительной обработки и структурирования информации в индексе. Давайте более подробно об этом поговорим.

Смотрите, как все происходит. Когда поисковый робот заходит на сайт он сразу же начинает разбивать его на некие составляющие. Во-первых, выполняется выборка всех ссылок из документа и добавления их в очередь для дальнейшего «путешествия» робота по просторам интернета. После чего робот начинает обработку текста страницы, разбивая его на некие логические составляющие, которые еще называют пассажами.

То есть, что значит пассаж? Все очень просто. Пассаж — последовательность слов или одно слово, находящееся в рамках html тега или знака препинания.

К примеру, у нас есть текст: «сейчас я пишу для вас статью, которая поможет вам понять принцип работы поисковых систем». Так вот, слова: «сейчас я пишу для вас статью» — это будет первый пассаж, а следующий набор слов — «которая поможет вам понять принципы работы поисковых систем» — это уже второй пассаж. Как видите, данные слова разбиваются на пассажи в зависимости от знаков препинания. Но здесь важно знать, что поисковый робот видит нашу страницу не так как обычный пользователь, он ее обрабатывает в виде html-кода. Причем в качестве разделителя пассажов выступают не только знаки препинания, но и теги блочных элементов (<p> ,<div>, <h2> и т.д.). Надеюсь здесь все понятно. Идем, дальше.

После того как текс будет разбит на пассажи, робот выполняет их структурирование по своей значимости. Дело в том, что вес того или иного текста на странице очень сильно зависит от того, в каком html-теге он находится. К примеру, текст который находится в теге <h2> будет иметь большую значимость для поисковой системы, нежели текст который заключен в тег <p>.

Конечно, вы должны понимать, что если вес текста в теге <h2> больше, нежели в <p> это не значит, что вы должны заключать весь текст в тег <h2>, скорей всего этим вы себе только навредите. Тем более это распределение значимости текста актуально только для ключевых слов. В общем, думаю, это понятно. Естественно, в будущем мы еще будем не раз говорить о том, как можно повысить вес страницы для поисковиков, так что подпишитесь на обновления блога, чтобы ничего не пропустить.

Помимо разбивки текста на пассажи робот выполняет расчленение текста и удаление так называемых «шумовых слов» или как еще их называют стоп слова. Другими словами, робот удаляет из текста все предлоги и незначимые части речи, которые выражаются в таких словах: в, на, при, а, у, из, от. То есть это те слова, которые не несут смысловой нагрузки.

После того как все вышеописанные манипуляции будут выполнены, поисковый робот помещает эти данные в основной индекс, по которому и выполняется поиск информации. Важно также знать, что помимо основного индекса поисковик сохраняет и копию страницы, которую он обработал. Эту копию вы можете очень легко посмотреть, нажать на ссылку «копия» которая обычно располагается возле результатов выдачи поисковой системы.

Когда вы перейдете по этой ссылке вы увидите копию страницы, которая на текущий момент находится в индексе поисковой системы. Если вы внимательно посмотрите, то увидите, что сверху страницу указывается время, когда поисковый робот индексировал данный документ. Как по мне это очень важная опция, так как она позволяет узнать, когда в последний раз на ваш сайт заходил поисковый робот и какая копия страниц на данный момент находится индексе.

Исходя из вышесказанного, можно легко понять, что все производимые вами манипуляции на странице связанные с поисковой оптимизацией начнут действовать только через некоторое время, когда поисковик вновь зайдет на сайт и подхватит новую копию документа.

Кстати, если вы хотите узнать, сколько на данный момент находится страниц в индексе, можете воспользоваться очень простым запросом, который выглядит так: «site:igorek.info». То есть вы просто вводите в строку поиску данный запрос (вместо igorek.info пишите свое имя домена) и смотрите, какие страницы участвуют в выдачи. В этом случае поисковик показывает только те страницы, которые принадлежат конкретному сайту.

Внимание! Очень важно понимать, когда речь идет о поисковой выдачи или поисковой оптимизации имеется в виду оптимизация отдельных страниц, а не сайта. Запомните, для поисковых систем понятия сайта не существует!!! Когда пользователь вводит какой-то запрос в строку поиска, ему показываются страницы, а не сайты. То есть, оптимизируем мы именно отдельные страницы.

Принципы работы поисковых систем понятие ТИЦ, ВИЦ и PR

Помимо того, что поисковик выполняет полную разбивку документа на пассажи и структурирование полученной информации для улучшения ее поиска, он также занимается оцениванием авторитетности обрабатываемой страницы. Как это понять? Дело в том, что в каждой поисковой системе есть некий перечень факторов, которые она учитывает при определении полезности и авторитетности ресурсов. Данных факторов существует очень много, но один из самых значимых — ссылочная масса. Другими словами это количество ссылок, которые ведут на страницу сайта. В простонародье этот фактор еще называют «индекс цитирования». Такого рода оценивания качества информации пришло в интернет с научных кругов, именно там показатель «ссылаемости» на какую-то научную работу определяет ее качество.

Поисковые системы ввели условные показатели авторитетности сайта исходя из количества ссылаемых на него ресурсов. Для Google этот показатель называется PR (Page Rang), который измеряется от 0 до 10. Для Яндекса это так называемый ТИЦ (тематический индекс цитирования), показывающий авторитетность сайта, этот показатель измеряется от 0 до условной бесконечности (у самого Яндекса ТИЦ 430 000 на момент публикации этой статьи) . Также Яндекс ввел так называемый ВИЦ (взвешенный индекс цитирования), который определял вес ссылок ведущей на сайт.

Получается, когда поисковый робот оценивает качество страницы, он берет в расчет количество ссылок ведущих на данную страницу, их вес и многие другие показатели. И это позволяет определить некий уровень качества индексируемой страницы, который учитывается при выдаче результатов пользователю, вбившего в строку поиска кукую-то искомую фразу.

Естественно помимо вышеуказанных факторов поисковые машины берут в расчет и многие другие показатели, которые, как вы понимаются, держатся в строгой тайне. Правда о некоторых из них стало известно посредством многих экспериментов и наблюдений специалистов в этой области, о них я вкратце рассказывал в этой статье, но, полного списка этих факторов никто не знает.

В общем, вы должны хорошо понимать, что поисковые машины — это очень сложный механизм, который выполняет огромную аналитическую работу, для того чтобы оценить качество документа. Причем этот механизм постоянно совершенствуется и если можно так выразиться — эволюционирует. Не зря сейчас существует много seo-компаний, которые берут огромные деньги, за продвижение сайтов в ТОП выдачи поисковой системы, проводится колоссальная работа владельцами проектов в плане раскрутки своих ресурсов с целью получения прибыли. И естественно, без знания базовых принципов работы поисковых систем здесь не обойтись.

Так же немаловажным является понимание того, что поисковые машины вам ничего не должны, и они имеют полное право удалить ваш сайт со своего индекса. Особенно если вы нарушаете лицензию пользования поисковой системой, поэтому ни в коем случаи не пытайтесь каким-то образом «надуть» Яндекс или Google и повлиять на их выдачу, это может кончиться наложением на ваш ресурс определенных санкций или же полным исключением его из поиска. Конечно же, здесь имеется в виду так называемые черные методы оптимизации, где используются специальные скрипты для перенаправления пользователя на другие сайты, скрытия контента от поисковых систем, массовая закупка ссылок, заспамленность страниц ключевыми словами и т.д.

Как бы там ни было вы должны хорошо осознавать, что ваш ресурс должен нести какую-то пользу посетителям. И если это будет так, то ни какие санкции поисковых систем вам не страшны. Это главное что нужно знать!