Лаборатория безопасности+7 (4872) 77-00-59
Arenadata · Оркестрация конвейеров данных
Arenadata

Arenadata Orchestrator

Платформа настройки и эксплуатации конвейеров данных на базе Apache Airflow. Объединяет расписания, зависимости, контроль выполнения и интеграции процессов дата-платформы.
«Лаборатория безопасности» является официальным партнёром вендора «Arenadata» и готова осуществить поставку и внедрение продукта «Arenadata Orchestrator».

Представление DAG-процесса в интерфейсе Arenadata Orchestrator на основе Airflow

Единый центр конвейеров данных

Arenadata Orchestrator описывает обработку информации в виде направленных графов задач Apache Airflow. ETL/ELT, SQL-модели dbt, подготовка данных для ML и регламентные задания получают общий механизм расписаний и зависимостей. Провайдеры, операторы, хуки и сенсоры связывают компоненты платформы.

Возможности Arenadata Orchestrator

Основа Apache Airflow

Оркестрация на базе Apache Airflow.

Управление DAG

DAG, расписания, зависимости, повторы и SLA.

Задачи обработки

ETL/ELT, dbt и ML-конвейеры.

Компоненты интеграций

Операторы, хуки и сенсоры для интеграций.

Доставка изменений

Git Sync для поставки изменений.

Устойчивость платформы

Высокая доступность и масштабирование по архитектуре.

Прозрачное выполнение задач

Веб-интерфейс показывает DAG, отдельные запуски, состояния задач и журналы. Администратор видит последовательность выполнения и причину сбоя, может использовать предусмотренные повторы и уведомления. Git Sync помогает доставлять изменения конвейеров согласованным способом вместо ручного редактирования на серверах.

Представление DAG-процесса в интерфейсе Arenadata Orchestrator на основе Airflow

Журналы выполнения задач в Arenadata Orchestrator

Журналы выполнения задач в Arenadata Orchestrator

Управляемое развитие процессов

Git Sync используется для синхронизации проектов из репозитория и организации согласованного процесса выпуска изменений. В корпоративной архитектуре предусмотрены средства высокой доступности планировщика и масштабирования рабочих процессов. Взаимодействие с продуктами Arenadata и внешними системами проектируют вместе с хранением секретов и сетевой доступностью.

Это позволяет сопровождать конвейеры как единый производственный сервис, а не набор индивидуальных запусков.

Подбор и внедрение

Нужны перечень заданий, связи между ними, источники и требования к расписанию. Согласуем роли, секреты, хранение метаданных и порядок выпуска изменений.

На пилоте проверяем типовые запросы, интеграции, расширения и поведение системы под рабочей нагрузкой. Для переноса данных согласуем объём, допустимый простой и способ возврата к исходной конфигурации. Отдельно проверяем восстановление из резервной копии и порядок установки обновлений.

Лицензирование и стоимость Arenadata Orchestrator

Коммерческая поставка, срок использования, состав компонентов и техническая поддержка рассчитываются по запросу. Единицу лицензирования и параметры продуктивных и тестовых контуров фиксируют в спецификации.

Стоимость — по запросу

Окончательные условия поставки согласуются в коммерческом предложении. Работы по внедрению, миграции, настройке и сопровождению рассчитываются отдельно от лицензий.

Другие продукты вендора в этом разделе

Описание подготовлено по официальным материалам разработчика: Продукт · Дополнительные сведения · Дополнительные сведения. Возможности и условия поставки уточняются для выбранной версии.

Другие направления каталога для комплексного проекта: Резервное копирование · Системы виртуализации. Совместимость выбранных решений проверяется при подборе конфигурации.

Подберём решение под вашу задачу

Уточним требования к инфраструктуре, состав лицензий, необходимый уровень поддержки и работы по внедрению. Согласуем проверку совместимости, этапы перехода и дальнейшее сопровождение. Работаем с организациями по всей России.

Запросить предложение
44-ФЗ223-ФЗ275-ФЗ

Для государственных и корпоративных заказчиков

Работаем с заказчиками по 44-ФЗ, 223-ФЗ и 275-ФЗ, а также с корпоративными заказчиками. Участвуем в закупочных процедурах любой степени сложности.

Готовим всю необходимую документацию для осуществления закупки, включая технические задания, коммерческие предложения и анализ рынка.