База сотовых россии..Телефонная база данных

   2012-09-23 17:29:00
база данных сотовых номеров bwc
+ развернуть текст   сохранённая копия

Тэги: bwc, база, номер, сотовый

Олег Тиньков начинает интернет-направление, предлагая зарплаты от миллиона рублей в месяц

   2012-09-23 13:49:43
После пельменей, пива и финансов Тиньков решил заняться информационными технологиями.
Вчера в ...
+ развернуть текст   сохранённая копия

Тэги: big, data, human, php, source, веб-разработка

Bank of America Corp (NYSE:BAC) начнет проект Project New BAC с увольнения 16 тыс. сотрудников

   2012-09-20 10:48:10
Bank of America Corp (NYSE:BAC) намерен ускорить темпы сокращения издержек, для чего до конца ...
+ развернуть текст   сохранённая копия

Тэги: america, bac, bank, citigroup, fargo, jpmorgan, new, project, well, брайан, компания, мойнихан, новость

Может ли обычный текст поглючить IE?

   2012-09-20 02:16:34
Каждый, кому приходилось заниматься разработкой сайтов, знает об ошибках браузеров.

...
+ развернуть текст   сохранённая копия

Тэги: bug, css, explore, html, internet, веб-разработка, верстка, ошибка, сайт

Эластичный MapReduce. Распределенная реализация

   2012-09-19 13:09:00
... , связанных с анализом Big Data.

Распределенное введение в эластичные проблемы Hadoop

Симбиоз облачных технологий и платформы Apache Hadoop уже не первый год рассматривается как источник интересных решений, связанных с анализом Big Data.

И основной момент, почему именно «симбиоз», а не «чистый» Hadoop – это, конечно, снижение уровня входа для разработчиков MPP-приложений (и не только) как с точки зрения квалификации (администратора), так и первоначальных финансовых вложений в аппаратную часть, на которой приложение будет исполняться.

Второй момент – это то, что облачные провайдеры смогут обойти некоторые ограничения Hadoop*, навязанные архитектурой master/slave (master всегда единичная точка отказа и с этим надо что-то делать) и, возможно (на Microsoft, в связи с параллельно развивавшимся проектом Dryad, была особая надежда), даже сильным сцеплением хранилища данных (HDFS) и компонентами выполнения распределенных вычислений (Hadoop MapReduce).

Надежды, относящиеся к первому пункту - снижение стоимости владения Hadoop-кластером - оправдались более чем: крупнейшая тройка облачных провайдеров, с разностью степенью близости к release-mode, начали предоставлять «Hadoop-кластер as a Service» (терминология моя и условная) за цены, вполне «подъемные» для стартапов и/или исследовательских групп.

Надежды же, связные с обходом ограничений платформы Hadoop, не сбылись вовсе.

Amazon Web Services, как и IaaS-платформа, никогда и не стремилась предоставлять услуги как сервис (хотя и тут есть исключение – Amazon S3, Amazon DynamoDB). И в далеком 2009 году компания Amazon предоставила разработчикам сервис Amazon Elastic MapReduce как инфраструктуру, а не как сервис.

Вслед за Amazon в середине 2010 года компания Google анонсировала экспериментальную версию программного интерфейса App Engine MapReduce, в рамках своей облачной платформы Google App Engine.

App Engine MapReduce API предоставил разработчикам «Hadoop MapReduce»-подобные интерфейсы к своим, уже работающим по парадигме map/reduce, службам. Но это никак не убрало ограничений сильной связанности хранилища данных и компонентов вычислений. Более того, сам Google добавил туда ограничений - возможности переопределения только map-фазы**, да и сама платформа GAE, со свойственными ей квотами, наложила (как я подозреваю) еще пару ограничений на App Engine MapReduce API.

В 2011 года очередь дошла до Microsoft. В октябре 2011 года Microsoft объявила об открытии сервиса Hadoop on Azure. На текущий момент времени он находится в CTP-версии. Попробовать у меня этот сервис из-за отсутствия приглашения (и наличия лени) не получилось. Но, по отсутствию статей о преодоленных ограничениях Hadoop, понятно, что «проблемы» платформы Hadoop и в этом случае оставили решать самой Hadoop.

Описанные выше ограничения решений на основе «облачных платформ + Hadoop» позволяют понять круг проблем, решаемых проектом Cloud MapReduce, речь о котором и пойдет далее.

Читать полностью