Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Законы Рода. Том 11
11. Граф Берестьев
Фантастика
:юмористическое фэнтези
,аниме
,фэнтези
.
5.00
рейтинг книги
Личинка
1. Звездный Бродяга
Фантастика
:боевая фантастика
,космическая фантастика
,рпг
,попаданцы
.
5.00
рейтинг книги
Газлайтер. Том 14
14. История Телепата
Фантастика
:попаданцы
,аниме
,фэнтези
.
5.00
рейтинг книги
Двойник короля 16
16. Двойник Короля
Фантастика
:аниме
,фэнтези
,попаданцы
.
5.00
рейтинг книги
Рядовой. Назад в СССР. Книга 1
1. Второй шанс
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Дважды одаренный. Том VI
6. Дважды одаренный
Фантастика
:аниме
,альтернативная история
,фэнтези
,фантастика: прочее
.
5.00
рейтинг книги
Гранит науки. Том 2
2. Героями не становятся, ими умирают
Фантастика
:фэнтези
.
5.00
рейтинг книги
Цикл романов "Целитель". Компиляция. Книги 1-17
Целитель
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Эволюционер из трущоб. Том 2
2. Эволюционер из трущоб
Фантастика
:космическая фантастика
,попаданцы
.
5.00
рейтинг книги
Погранец
2. Решала
Фантастика
:фэнтези
,боевая фантастика
,альтернативная история
.
5.00
рейтинг книги
Убивать чтобы жить 9
9. УЧЖ
Фантастика
:героическая фантастика
,боевая фантастика
,рпг
.
5.00
рейтинг книги
Вперед в прошлое 6
6. Вперед в прошлое
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Родословная. Том 1
1. Линия крови
Фантастика
:городское фэнтези
,аниме
,фэнтези
,фантастика: прочее
.
5.00
рейтинг книги
Курсант: Назад в СССР 7
7. Курсант
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Неучтенный элемент. Том 3
3. Антимаг. Вне системы
Фантастика
:фэнтези
.
5.00
рейтинг книги
Медиум
1. О чем молчат могилы
Фантастика
:фэнтези
.
7.90
рейтинг книги
Патрульный
2. Наемник
Фантастика
:боевая фантастика
,космическая фантастика
.
8.42
рейтинг книги
