Cloud.ru расширил платформу Evolution Data Platform, добавив сервисы для работы с данными. Evolution Managed Airflow переведён в коммерческую эксплуатацию, Evolution Managed Flink доступен в режиме публичного тестирования. Оба решения интегрированы с другими компонентами платформы, сообщили блогу Игнатий Цукергохер в пресс-службе Cloud.ru.
Evolution Managed Airflow построен на Apache Airflow и используется для оркестрации процессов, включая ETL. Пользователь задаёт параметры и последовательность задач, их выполнение автоматизируется. Сервис также применяется для автоматизации отчётности, управления инфраструктурой и ML-задач.
Evolution Managed Flink — PaaS-сервис на базе Apache Flink для обработки потоковых и пакетных данных в реальном времени. Поддерживается обработка событий по мере поступления, включая работу с потоками из Kafka и обновление аналитических систем. Сценарии применения включают мониторинг, поведенческую и финансовую аналитику, а также оценку маркетинговых активностей.
Сервисы встроены в Evolution Data Platform и используются в сквозных сценариях обработки данных. Потоки могут поступать через Managed Flink, обрабатываться в Managed Spark, храниться в Managed ArenadataDB и использоваться в Managed BI. В платформе реализованы единые механизмы мониторинга, управления доступом, метаданными и ресурсами.
«Мы последовательно развиваем Evolution Data Platform как единую платформу, которая покрывает весь цикл работ с данными. В результате пользователи получают не набор разрозненных инструментов, а готовую экосистему для хранения, обработки и анализа данных в одном контуре. Это снижает затраты на интеграцию решений и упрощает управление инфраструктурой. Также платформа открывает новые сценарии работы с ИИ. Например, данные из корпоративных систем могут использоваться для обучения моделей, создания интеллектуальных помощников и ИИ-агентов, которые помогают искать информацию, анализировать документы и получать ответы на вопросы на естественном языке», — сказала Ася Грибанова, директор департамента разработки Evolution Data Platform.
