Hortonworks Data Platform (HDP)

2017: Интеграция с хранилищами IBM

16 марта 2017 года IBM и Hortonworks объявили о работе над доступностью платформы Hortonworks Data Platform для решений IBM Elastic Storage Server (ESS) и IBM Spectrum Scale. Достигнутое соглашение приведет к сертификации Hortonworks HDP на процессорах Power и Hortonworks HDP на базе x86 с решением IBM Spectrum Scale.

Доступность Hortonworks HDP на платформе POWER8 для заказчиков IBM обеспечила широкий выбор при определении платформы для дистрибутива Hadoop. Cоглашение позволит им привлекать инвестиции в системы хранения IBM для развертывания приложений по обработке больших данных на базе Hadoop. Кроме того, по договору существующие пользователи Hortonworks HDP получат доступ к альтернативному решению корпоративной системы хранения для рабочих нагрузок Hadoop и Spark – IBM Spectrum Scale.

Представление взаимодействия IBM Spectrum Scale, (2017)

Соглашение представляет пакет услуг IBM Storage и корпоративное решение Software Defined Storage, сертифицированное для Hortonworks.

Сертификация HDP приведет к росту доверия к платформе среди потенциальных заказчиков IBM. Пользователи получат возможность управлять приложениями Hadoop с помощью программно определяемых решений для хранения информации. Заказчики IBM смогут воспользоваться корпоративным хранилищем, аналитическими приложениями Hortonworks для обработки данных. Выбрав централизованную или распределенную архитектуру развертывания, организации смогут повысить эффективность бизнеса с помощью управления данными, резервного копирования, информационной безопасности и систем гибридного облачного хранения данных.

Каждая организация становится цифровой. Благодаря этому соглашению IBM представит мощную платформу, как для расширения масштабов использования данных, так и для когнитивных приложений. Этот запуск демонстрирует нашим партнерам приверженность IBM содействию росту и развитию бизнеса заказчиков, а также упрощению их трансформации в вопросах использования имеющихся данных. Эд Уолш, руководитель IBM Storage and Software Defined Infrastructure

Это соглашение развивает наши отношения с IBM и поддерживает неизменный фокус компании на ценности клиента и ведении успешного бизнеса. Благодаря экспертизе Hortonworks и технологии хранения IBM сертифицированные предложения помогут пользователям ускорить внедрение современных приложений для обработки данных. Крис Салливан, старший вице-президент направления Global Channels and Alliances компании Hortonworks

Основные свойства HDP для IBM Elastic Storage Server (ESS) и IBM Spectrum Scale:

• эффективность хранения – в отличие от HDFS, которая создает три копии каждой единицы данных, IBM ESS использует код избыточности, устраняя необходимость создания множества копий и увеличивая рентабельность хранения.
• гибридное хранилище позволяет расширить хранение на локальных системах с помощью облака и предлагает множество выгод за счет экономии, функций безопасности, доступности.
• производительность – в качестве оптимального, параллельного решения хранения ESS обладает производительностью.

2016: Hortonworks Data Platform 2.5

В августе компания Hortonworks предложила Hortonworks Data Platform 2.5, на базе Hadoop с набором расширений от глубокого анализа данных и управления доступом к данным до безопасности и полного руководства данными.

В новую HDP 2.5 интегрированы Apache Atlas для руководства данными и Apache Ranger (технология безопасности, использующая динамическую классификацию); включена также новейшая технология Apache Ambari, которая упрощает установку, защищенное конфигурирование, администрирование и сопровождение HDP.

2014: Hortonworks Data Platform 2.1

В апреле 2014 года компания выпустила новую версию своего дистрибутива Hadoop, добавив новую технологию SQL-запросов, чтобы повысить скорость и масштаб запросов к Hadoop. Hortonworks Data Platform 2.1 включает Apache Hive 0.13, плод инициативы «Stinger» группы Apache Software Foundation, имевшей целью ускорить выполнение SQL-запросов и предоставить возможности интерактивных запросов в масштабе петабайт.

HDP 2.1 привносит также технологию Apache Falcon для улучшения комплексного управления данными в рамках Hadoop, технологию Apache Knox для защиты периметра, механизм обработки Apache Storm для улучшения потоковой обработки в реальном времени и поисковую технологию Apache Solr.