Предлагаем вашему вниманию новый курс лекций Техносферы. Он представляет собой введение в Hadoop, фокусируясь на проектировании и реализации распределенных алгоритмов, которые могут применяться в различных сферах: обработка текстов, графов, связанных данных и т.п. Также рассматриваются различные компоненты платформы Hadoop и программные модели. Целью курса является знакомство студентов со стеком технологий Hadoop, применяемых для хранения, доступа и обработки больших объемов данных. Преподаватели курса: Алексей Романенко, Михаил Фирулик, Николай Анохин.

Лекция 1. Введение в Big Data и MapReduce

Что такое «большие данные». История возникновения этого явления. Необходимые знания и навыки для работы с большими данными. Что такое Hadoop, где он применяется. Что такое «облачные вычисления», история возникновения и развития технологии. Web 2.0. Вычисление как услуга (utility computing). Виртуализация. Инфраструктура как сервис (IaaS). Вопросы параллелизма. Управление множеством воркеров. Дата-центры и масштабируемость. Типичные задачи Big Data. MapReduce: что это такое, примеры. Распределённая файловая система. Google File System. HDFS как клон GFS, его архитектура.


Читать дальше →

Прогнозы UBS о том, во II квартале 2015 года Apple продаст 51,1 млн смартфонов значительно превосходят ожидания специалистов Wall Street Journal, которые уверенны, что купертинцы поставят только 45 млн. Продажи…

Запись Новости hi-tech 16 мая 2015 года — И дальше сохранится высокий спрос на iPhone впервые появилась Мифс - новостной обозреватель.

Согласно данным Re/code, создание собственного конкурента Apple Pay обошлось компании Samsung в $250 млн. По утверждению источника, именно столько южнокорейская компания заплатила за LoopPay. Напомним, что еще в начале февраля…

Запись Новости hi-tech 14 мая 2015 года — За конкурента Apple Pay $250 миллионов заплатила Samsung впервые появилась Мифс - новостной обозреватель.

Для строительства магистрали под Атлантикой будет впервые использован кабель AEConnect, стоимость которого составляет практически $300 млн. Кабель использует 130 длин волн на 100 Гбит/с на волокно пары и будет служить…

Запись Новости hi-tech 13 мая 2015 года — Трансконтинентальные линии связи строит Microsoft впервые появилась Мифс - новостной обозреватель.

В ведомстве отметили, что благодаря налаженному украинской спецслужбой международному взаимодействию с администрацией платежной системы регистрация подобных электронных кошельков отныне будет отслеживаться специалистами компании в он-лайн режиме. «Пособники боевиков зарегистрировали в…

Запись Новости hi-tech 12 мая 2015 года — Электронные кошельки террористов СБУ заблокировала впервые появилась Мифс - новостной обозреватель.