Навигация: Главная Обзоры Статьи Индексирование сайта


Индексирование сайта

20.05.2014

Индексирование сайта

Процесс, который включает данные о страницах сайта в базу поисковых систем, называется индексирование сайта. После окончания процесса индексирования, документ может быть доступен для поиска и отображается на страницах результатов.

Стадии индексирования

Существует несколько сайтов индексирования сайта, которые фактически представляют собой целый ряд независимых процессов. Поисковые системы осуществляют обработку данных непрерывным процессом, где одновременно обрабатываются разные страницы других сайтов. Поэтому этапы обработки выделяются не для всего сайта, а лишь для отдельной страницы. Каждая поисковая система обладает своей последовательностью и алгоритмами обработки, но существуют основные операции, которые объединяют всех поисковиков.

Сканирование страниц

Сканированием страниц занимаются определенные серверы сканирования, которые действуют по расписанию. На этих серверах запускаются процессы, имеющие названия - роботы или боты. В сферу задач робота входит отсылание http запроса по данной ссылке, получение документа и его сохранность.

Разбор страниц

В поисковой базе каждая страница, которая была просканирована, получает свой уникальный идетификатор. Страница, попадающая под сканирование первый раз, обрабатывается.

В результате чего она получает идентификатор и ставится URL. В данном случае страница разбирается в том же порядке, как это делает браузер, а именно - на составные части, которые соответствуют структуре html. Документ разбирается на части, которые имеют значения для поиска, где выделяются заголовки страниц, мета описания, ссылки, анкоры, блоки, заголовки текста, а также графические элементы.

Учет обновлений

На этой стадии ведется проверка всех изменений на странице. Эти изменения, а также новые фрагменты текста и другие элементы хранятся для дальнейшей корректировки в поисковой базе.

Выборка ссылок

Ссылки, которые были найдены во время разбора страницы, учитываются и подвергаются обработке в отдельном файле. Внутренние ссылки проходят проверку и сверку на соответствие с ссылками в этом домене. В случае, когда обнаруживаются вновь созданные ссылки, их ставят в очередь для последующего сканирования. Внешние ссылки также проходят проверку и сверяются со списками в соответствующих доменах и проходят ту же процедуру, что и внутренние. Таким образом, поисковая система выявляет новые страницы.

Включение в поисковую базу

Новые страницы включаются в поисковую базу не одновременно, а периодически. Данные сканирования обрабатываются и сохраняются в отдельном файле для последующего пополнения и изменения базы, которая проходит по расписанию. В таком подходе есть необходимость, обусловленная корректировкой большинства, связанных друг с другом, данных для каждой новой страницы. Эти данные в будущем повлияют на ранжирование данного материала.

Приоритеты

Поисковики работают на основании целой системы приоритетов. Именно поэтому, они оперативно и своевременно предоставляют свежие и актуальные итоги поиска. Всем пользователям давно известно, что когда появляется новый сайт, который еще неизвестен поисковой системе, то в выдаче по любому запросу он появится не раньше чем через неделю.

данная информация особенно будет полезна тем, кто занимается продвижением сайтов в Яндекс.

 
Баннер
Баннер

Следуй за нами

   

Авторизация



Статистика сайта

Сейчас на сайте:
  • 159 гостей
Всего пользователей: 12175

Наша гордость

  • cvetercom
    186 (+19/-5)
  • Nikolia
    130 (+10/-1)
  • root
    120 (+18/-1)
  • apricot
    113 (+20/-4)
  • Fidelity
    101 (+10/-1)
  • Xemreht
    63 (+3/-0)
  • bod
    47 (+5/-1)
  • zloy_pozitiv
    43 (+4/-0)
  • Magnum79
    26 (+2/-1)
  • trixxxden
    26 (+0/-0)
  • RaGaYa
    23 (+0/-0)
  • kola60
    23 (+0/-2)
  • Nette
    18 (+2/-0)
  • StAtiC
    17 (+2/-0)

Комментарии статей

Баннер

Изучаем CMS Joomla!

-ingateДля всех, кто хочет улучшить видимость сайта в поисковых системах, повысить количество целевых посетителей и увеличить доход от ресурса, эксперты компании...
l11-r-ingateКаждый специалист по маркетингу знает, что большая посещаемость важна для коммерческого сайта, но еще важнее, чтобы пришедшие пользователи...
4-Посещаемость сайта все выше, денег покупатели тратят все больше, бизнес растет как на дрожжах. Согласитесь, это мечта любого владельца сайта и...
lseo-r-Мощный, заряженный мотивацией текст «продаст» товар даже тому, кто не заинтересован в покупке. Однако, если этот текст «некачественный» с точки зрения...
-l-seor-Скоро лето ─ сезон отпусков, пикников и отдыха. Возьмите с собой в дорогу или на дачу книгу «Как попасть в ТОП: практика эффективного SEO». В новом...