Новости
|
3 февраля 2012. 15:16
Расставшись с ICQ, «Яндекс» заключил договор о сотрудничестве со Skype ...
|
 |
3 февраля 2012. 15:01
Социальная сеть Одноклассники, проект Mail.Ru Group, вводит на сайте расширенные настройки публичности ...
|
|
3 февраля 2012. 14:39
Сервис «Рамблер-Новости» будет вести три прямые трансляции с московских митингов в эту субботу, 4 февраля ...
|
|
3 февраля 2012. 12:56
13-14 марта пройдет конференция i-СOMference, посвященная социальным сетям, интернет-СМИ и мобильным технологиям ...
|
 |
3 февраля 2012. 12:45
Net Applications: доля IE поднялась на фоне снижения популярности Chrome ...
|
 |
3 февраля 2012. 12:40
Компания Билла Гейтса попыталась расширить свою аудиторию за счёт пользователей конкурента ...
|
Советуем посмотреть:
зарегистрировать оффшоркупить запчасти iveco
лучшая forex торговля без вложений
Справочник
Навигация по справочнику:
English:
A
|
B
|
C
|
D
|
E
|
F
|
G
|
H
|
I
|
J
|
L
|
M
|
N
|
P
|
R
|
S
|
T
|
U
|
V
|
W
|
X
|
Y
Русский:
А
|
Б
|
В
|
Г
|
Д
|
З
|
И
|
К
|
Л
|
М
|
Н
|
О
|
П
|
Р
|
С
|
Т
|
У
|
Ф
|
Х
|
Ц
|
Ч
|
Э
|
Ю
|
Я
Поисковый робот
Поисковый робот еще называют спайдером или пауком. Это являющаяся частью поисковой машины специальная программа, которая осуществляет обход страниц в Интернете для занесения в базу данных поисковой системы информации об этих страницах (ключевых словах).
Поисковый робот, по сути, похож на браузер. Он занимается сканированием содержимого страницы, после чего отправляет содержимое на сервер поисковой машины, затем начинает сканировать следующую страницу. Обычно размер текста, который сканируется поисковым роботом, и глубина проникновения внутрь ресурса, имеет ограничения. Так что может оказаться, что поисковая машина проиндексирует слишком большой сайт не полностью. Помимо обычного поискового робота, есть специализированные роботы, которые для того, чтобы определить, подключен ли проиндексированный сайт к Интернету, простукивают его (роботы-дятлы).
В зависимости от алгоритма поисковой машины определяются критерии нахождения ключевых слов, частота визитов на сайт, порядок, в котором осуществляется обход страниц, осуществляется защита от зацикливания.
Обычно с одной на другую страницу можно переходить по ссылкам, содержащимся на первой, а также на других страницах.
Кстати, обычно в очередь на индексирование пользователь может добавить сайт и самостоятельно. Это не только ускорит процесс индексирования, но и иногда является единственным вариантом для того, чтобы поисковая система узнала о существовании ресурса (например, случае, если на данный сайт не ведут никакие внешние ссылки).
Существует возможность ограничения индексации ресурса. Для этого используется файл robots.txt. Хотя некоторые поисковики данный файл просто игнорируют. Чтобы обеспечить полную защиту от индексации, нужно использовать специальные механизмы. Чаще всего в таких случаях на страницу устанавливают пароль. Защитой может послужить и заполнение регистрационной формы для получения доступа к странице.
Следующий термин: Поисковый спам »
Предыдущий термин: « Поисковый алгоритм
Похожие термины:дорвей
релевантность
мета теги
Также на сайте SeoPro вы можете прочитать интересные статьи о
www.baidu.com
эффективность интернет маркетинга
аналитика веб сайтов
Вы знаете термин, которого нет у нас? Добавьте название и описание термина, мы навсегда разместим благодарность о Вас и вашем интернет-ресурсе.
Добавить можно тут.
