Cloud.ru расширил функциональные возможности Evolution Data Platform, внедрив новые инструменты для обработки информации в облачной среде. Сервис Evolution Managed Airflow, предназначенный для оркестрации рабочих процессов, начал коммерческое использование, а Evolution Managed Flink, обеспечивающий распределенную обработку потоковых и пакетных данных, стал доступен в режиме публичного тестирования. Оба решения интегрированы с другими элементами платформы и функционируют в едином контуре. Об этом CNews проинформировали представители Cloud.ru.
Evolution Managed Airflow создан на базе открытого программного обеспечения Apache Airflow. Сервис помогает управлять ETL-процессами (Extract Transform Load — извлечение, преобразование и загрузка данных для аналитики): пользователю достаточно задать параметры и порядок выполнения задач, а сервис автоматически организует их выполнение. Managed Airflow подходит не только для ETL-процессов, но и для автоматизации других задач, таких как создание и отправка отчетов, управление инфраструктурой, проведение ML-экспериментов.
Кроме того, для пользователей Cloud.ru стал доступен Evolution Managed Flink — управляемый PaaS-сервис на основе Apache Flink для обработки потоковых и пакетных данных в реальном времени. Он позволяет реагировать на события сразу после их возникновения — например, обрабатывать поток данных из Kafka и одновременно обновлять дашборды, оповещения и витрины данных. Это делает его подходящим для мониторинга инцидентов, анализа поведения пользователей, финансовой аналитики для предотвращения мошенничества и оценки маркетинговых кампаний для корректировки стратегии.
Новые сервисы встроены в экосистему Evolution Data Platform. Такой подход дает возможность реализовывать сквозные сценарии работы с данными: например, данные могут поступать на платформу через Managed Flink, обрабатываться и обогащаться в Managed Spark, храниться в Managed ArenadataDB, а затем использоваться для аналитики и визуализации в Managed BI. Единые механизмы мониторинга, контроля доступа, управления метаданными и ресурсами в облаке позволяют командам сосредоточиться на работе с данными, а не на поддержке инфраструктуры.
«Мы последовательно развиваем Evolution Data Platform как единую платформу, которая охватывает весь цикл работы с данными. В итоге пользователи получают не набор разрозненных инструментов, а готовую экосистему для хранения, обработки и анализа данных в одном контуре. Это снижает затраты на интеграцию решений и упрощает управление инфраструктурой. Кроме того, платформа открывает новые сценарии работы с ИИ. Например, данные из корпоративных систем могут использоваться для обучения моделей, создания интеллектуальных помощников и ИИ-агентов, которые помогают искать информацию, анализировать документы и получать ответы на вопросы на естественном языке», — отметила Ася Грибанова, директор департамента разработки Evolution Data Platform.