Сегодня 27 февраля, четверг ГлавнаяНовостиО проектеЛичный кабинетПомощьКонтакты Сделать стартовойКарта сайтаНаписать администрации
Поиск по сайту
 
Ваше мнение
Какой рейтинг вас больше интересует?
 
 
 
 
 
Проголосовало: 7278
Кнопка
BlogRider.ru - Каталог блогов Рунета
получить код
Главная /

Главные темы

/

Тэг «architectural»

Главные темы

Hadoop save the World? (Платформа Hadoop. Заключение)

   2012-08-19 16:32:00
В последней части цикла про Hadoop ...
+ развернуть текст   сохранённая копия
Читать полностью

Тэги: architecture, hadoop, hdfs, mapreduce


Hadoop MapReduce. Основные концепции и архитектура (Платформа Hadoop. Часть 3)

   2012-08-19 16:26:00
предыдущем посте были рассмотрены концепции и структура распределенной файловой системы ...
+ развернуть текст   сохранённая копия

Программная модель map/reduce

Выполнение распределенных задач на платформе Hadoop происходит в рамках парадигмы map/reduce*.
map/reduce – это парадигма (программная модель) выполнения распределенных вычислений для больших объемов данных.
В общем случае, для map/reduce выделяют 2 фазы:
  • map(ƒ, c)
    Принимает функцию ƒ и список c. Возвращает выходной список, являющийся результатом применения функции ƒ к каждому элементу входного списка c.
    map(f, c)
  • reduce(ƒ, c)
    Принимает функцию ƒ и список c. Возвращает объект, образованный через свертку коллекции c через функцию ƒ.
    reduce(f, c)
Программная модель map/reduce была позаимствована из функционального программирования, хотя в реализации Hadoop и имеет некоторые семантические отличия от прототипа в функциональных языках.
Читать полностью

Тэги: architecture, hadoop, mapreduce


Свобода – жилищно-офисный комплекс

   2012-08-16 03:27:07
... студии Dominique Perrault Architecture. «Свобода» представляет собой ...
+ развернуть текст   сохранённая копия

Тэги: architecture, dominique, perrault, европа, жилой, здание, комплекс, нидерланды, офис, сооружение


Архитектура: Brisbane Street Additions – эко-архитектура от британских архитекторов

   2012-08-15 20:35:51
... студии Rad Architecture. Здание расположено ...
+ развернуть текст   сохранённая копия

Тэги: architecture, rad, австралия, архитектура, великобритания, дизайн, жилье, интерьер, экология


HDFS. Основные концепции и структура (Платформа Hadoop. Часть 2)

   2012-08-12 19:57:00
предыдущем посте был сделан обзор платформы Hadoop, рассмотрена структура экосистемы ...
+ развернуть текст   сохранённая копия
Одним из ключевых компонентов платформы Hadoop является файловая система HDFS.
Hadoop Distributed File System (HDFS) - распределенная файловая система, которая обеспечивает высокоскоростной доступ к данным приложения.

Концепции и структура HDFS

HDFS является иерархической файловой системой. Таким образом, в HDFS имеется поддержка вложение каталогов. В каталоге может располагаться ноль или более файлов, а также любое количество подкаталогов.
HDFS состоит из следующих обязательных компонентов:
  • Узел имен (NameNode) – программный код, выполняющийся, в общем случае, на выделенной машине экземпляра HDFS и отвечающий за файловые операции (работу с метаданными);
  • Узел данных (DataNode) – программный код, как правило, выполняющийся выделенной машине экземпляра HDFS и отвечающий за операции уровня файла (работа с блоками данных).
Hadoop содержит единственный узел типа NameNode и произвольное количество узлов типа DataNode.
HDFS Design
Основные концепции, заложенные при проектировании HDFS, и архитектурные решения, применяемые для реализации этих концепций, приведены ниже:
Читать полностью

Тэги: architecture, hadoop, hdfs


Страницы: ... 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 ... 

 

Главная / Главные темы / Тэг «architectural»
Самый-самый блог
Блогер ЖЖ все стерпит
ЖЖ все стерпит
по количеству голосов (152) в категории «Истории»


Загрузка...Загрузка...