Навигация
Категории раздела
Последние поступления
Статистика

Интересные статьи

Главная » Статьи » Для веб-мастера » Статьи полезные для веб-мастера
Что такое робот поисковой системы
Что такое робот поисковой системы 

  
  Робот (англ. crawler) хранит список URL, которые он может проиндексировать, и регулярно выкачивает соответствующие им документы. Если при анализе документа робот обнаруживает новую ссылку, он добавляет ее в свой список. Таким образом, любой документ или сайт, на который есть ссылки, может быть найден роботом, а значит, и поиском Яндекса. 

Какие бывают индексирующие роботы 

  В Яндексе есть несколько видов роботов, которые выполняют разные функции. Например, есть робот, который индексирует rss-ленту для поиска по блогам. Или робот, который индексирует только картинки. Самый важный — основной индексирующий робот, функция которого — поиск и индексирование информации для формирования базы основного поиска. 

  В помощь основному есть быстрый робот — он предназначен для оперативного индексирования свежей, актуальной на данный момент информации. Если среди проиндексированных страниц своего сайта вы видите две копии какого-либо документа — скорее всего это означает, что помимо основного робота документ также был проиндексирован и быстрым роботом. 

Источник: yandex.ru

Категория: Статьи полезные для веб-мастера | Добавил: Admin (16.10.2011)
Просмотров: 637 | Теги: Яндекс, робот, поисковики | Рейтинг: 5.0/2
Всего комментариев: 0
Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]
Поиск
Наш опрос
Нашли то что искали на нашем сайте?
Результаты | Архив опросов
Всего ответов: 2270
Новое на форуме
Заказ ключа для программного обеспечения

Стоит ли покупать игровую валюту в Diablo?

Красивый информер "кто нас сегодня посетил" для Ucoz

Flash радио для сайта

Оптимизация системы

Наша кнопка

Диагностика

Ключи серийники для антивируса Касперский

Ключи кейген для Eset nod 32, Eset Smart Security

Лекарство кейген и русификатор для MOBILedit! Standard 6.9.0

© 2024 Softal

О материалах размещенных на сайте