Интернет-разведка. Руководство к действию
2007 г.
Отрывок из книги
На сервере поисковой машины текст разбивается на отдельные слова, каждому из которых присваиваются координаты, после чего они заносятся в таблицу сервера вместе со ссылкой на тот адрес в Интернете, по которому текст размещался в момент посещения его пауком. Сам по себе поисковик представляет собой большую локальную сеть, состоящую из мощных компьютеров с огромным объемом дисковой памяти. Эти машины разделены на подгруппы (так называемые кластеры), между которыми распределяется информация, собранная пауками.
Когда поисковая система получает запрос, она ищет ответ именно в своей таблице, а не в Интернете. При этом важно понять, как паук решает, с какой частотой ему следует посещать ту или иную страницу. Выглядит этот алгоритм приблизительно следующим образом. Поработав со страницей, паук возвращается на нее, н у, например, через две недели. И если видит, что никаких изменений не произошло, он планирует следующее посещение через более длительный период – скажем, через месяц. А если и тогда не обнаружит ничего нового, то наведаетсяя сюда еще позже, месяца через полтора-два.
Вот почему нередко бывает так, что поисковая машина по запросу результат выдает, а попытка перейти на страницу по полученной ссылке безрезультатна – вероятнее всего, никакой страницы уже просто не существует на прежнем месте, но паук на нее давно не заходил, и, соответственно, поисковая система о ее удалении не знает.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[6.4 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Кодекс Охотника. Книга III
3. Кодекс Охотника
Фантастика
:фэнтези
,попаданцы
,аниме
.
7.00
рейтинг книги
Магия чистых душ
Любовные романы
:любовно-фантастические романы
.
5.40
рейтинг книги
Чехов. Книга 2
2. Адвокат Чехов
Фантастика
:фэнтези
,альтернативная история
,аниме
.
5.00
рейтинг книги
Неудержимый. Книга XXIX
29. Неудержимый
Фантастика
:попаданцы
,аниме
,фэнтези
,фантастика: прочее
.
5.00
рейтинг книги
Сотник
4. Помещик
Фантастика
:альтернативная история
.
5.00
рейтинг книги
Идеальный мир для Лекаря 20
20. Лекарь
Фантастика
:фэнтези
,юмористическое фэнтези
,аниме
.
5.00
рейтинг книги
Некурящий. Трилогия
Некурящий
Фантастика
:фэнтези
,боевая фантастика
,попаданцы
.
5.00
рейтинг книги
Идеальный мир для Лекаря 3
3. Лекарь
Фантастика
:фэнтези
,юмористическое фэнтези
,аниме
.
5.00
рейтинг книги
Дважды одаренный. Том V
5. Дважды одаренный
Фантастика
:аниме
,альтернативная история
,городское фэнтези
.
5.00
рейтинг книги
Держать удар
11. Девяностые
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Мое ускорение
5. Девяностые
Фантастика
:попаданцы
,альтернативная история
.
6.33
рейтинг книги
Гибель титанов. Часть 2
14. Третий Рим
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Дважды одаренный. Том II
2. Дважды одаренный
Фантастика
:городское фэнтези
,альтернативная история
,аниме
.
5.00
рейтинг книги
Неучтенный элемент. Том 3
3. Антимаг. Вне системы
Фантастика
:фэнтези
.
5.00
рейтинг книги
Телохранитель Генсека. Том 2
2. Медведев
Фантастика
:попаданцы
,альтернативная история
.
6.25
рейтинг книги
Воевода
5. Помещик
Фантастика
:альтернативная история
.
5.00
рейтинг книги
Седьмой Рубеж V
5. 5000 лет темноты
Фантастика
:фэнтези
,попаданцы
.
5.00