Описание
Arenadata Streaming — масштабируемая отказоустойчивая система для потоковой обработки данных в режиме реального времени, адаптированная для корпоративного использования и построенная на базе Apache Kafka и Apache Nifi. Продукт включает графический пользовательский веб-интерфейс для управления и мониторинга кластеров потоковой передачи (ADS Control), поддержку расширенной безопасности (Arenadata Platform Security, ADPS), а также ряд дополнительных инструментов для реализации репликации, проверки качества данных и других необходимых для продуктовой эксплуатации функций.
Arenadata Streaming позволяет:
- в реальном времени строить потоковые конвейеры данных, надёжно передающих данные между системами или приложениями;
- в реальном времени разрабатывать потоковые приложения, преобразующие потоки данных или реагирующие на них;
- хранить потоки записей отказоустойчивым долговечным способом;
- разграничивать права доступа к потокам данных.
Arenadata Streaming (ADS) представляет собой масштабируемую отказоустойчивую систему для потоковой обработки данных в режиме реального времени, адаптированную для корпоративного использования и построенную на базе Apache Kafka и Apache NiFi. Продукт обеспечивает высокую скорость обработки данных с возможностью интеграции с различными источниками данных и приложениями, обеспечивая надежность и безопасность передачи информации.
Платформа поддерживает функционал для работы с большими данными, включая управление доступом, потоковую обработку и возможность создания кластеров для обработки данных. ADS предоставляет широкий набор инструментов и API для взаимодействия с системой и настройки потоков данных, а также интерфейсы для управления и мониторинга.
Среди возможностей платформы стоит выделить: поддержку аутентификации с использованием SASL, Kerberos и Active Directory, возможности для настройки шифрования через SSL, а также использование Ranger для управления доступом.
Поддерживаемыми платформами являются различные версии операционных систем Linux, с минимальными требованиями к аппаратным ресурсам, включая многопроцессорные системы и сетевые конфигурации, подходящие для развертывания кластеров. Необходим процессор не ниже четырехъядерного, минимально 16 ГБ оперативной памяти и доступ к высокоскоростной сети.
Кейсами использования Arenadata Streaming являются обработка больших объемов данных в реальном времени, анализ и обработка логов с веб-серверов, обработка транзакционных данных, а также автоматизация обработки данных из IoT-устройств и других источников в режиме реального времени. Продукт наибольшее применение находит в отраслях, связанных с банковским делом, телекоммуникациями, медицинскими данными и интернетом вещей.
Уникальными особенностями Arenadata Streaming являются его высокая масштабируемость, равномерная распределенность нагрузки в кластерах и интеграция с современными облачными решениями и системами хранилищ данных. Платформа гарантирует безопасность данных на уровне передачи и хранения через механизмы шифрования и аутентификации, предоставляя пользователям возможность создания адаптированных решений под специфические задачи бизнеса.
Важным аспектом работы ADS является мониторинг и управление системными ресурсами в реальном времени, что позволяет заметно повышать производительность обработки и минимизировать время простоя при возникновении сбоев системы. А также обеспечение гибкости в настройке потоков данных, обеспечивающее одновременную работу нескольких процедур обработки.
Платформа позволяет осуществлять интеграцию с рядов решений, таких как Apache Kafka, NiFi, и предоставляет возможности для использования REST API для разработки пользовательских приложений и сервисов. Программные и аппаратные требования заносятся в документацию с рекомендациями по конфигурации, что делает устанавливаемую систему максимально совместимой с существующей ИТ-инфраструктурой.
Совместимость:
Работает на операционных системах: Операционные системыAstra Linux Special EditionСерверные ОСРЕД ОСОперационная система Альт СП
Aльтернативные названия:
«Arenadata Streaming Platform» («ADS»);
Arenadata Streaming Platform (ADS) для продуктивной среды;
Arenadata Streaming Platform (ADS) для тестовой среды;
Arenadata Streaming Platform (ADS) для среды разработки;
Arenadata Streaming Platform (ADS) для продуктивной резервной среды
Если вы обнаружили ошибку, пожалуйста, уведомите нас — выделите текст с ошибкой и нажмите клавиши Ctrl+Enter.
