НАТИВНАЯ МИГРАЦИЯ
Apache Oozie (CDH, HDP)
XML-workflow устаревших Hadoop-дистрибутивов.
ПРИМЕНЕНИЕ
Целевые сценарии применения
Один центр управления конвейерами платформы.
ETL/ELT-конвейеры. Извлечение, трансформация и загрузка между десятками систем; свои операторы и хуки; динамическая генерация DAG.
Витрины на dbt. Хранилища собираются SQL-моделями dbt: для ADB существует адаптер Greengage, открытые адаптеры покрывают ClickHouse, PostgreSQL, Trino, Spark и другие сервисы. Тесты и документация встроены в модели.
Машинное обучение. Подготовка данных, обучение, деплой и мониторинг моделей в одном DAG.
Интеграция данных. Провайдеры к продуктам Arenadata и внешним системам; DuckDB для перекачки данных: форматы Iceberg и Paimon, каталоги через Hive Metastore ADH.
Регламентные задания. Расписания, повторы, SLA и алерты вместо разрозненных crontab-задач на десятках машин.
Управление инфраструктурой. Богатый набор готовых операторов, хуков и сенсоров: Kubernetes, REST API, SSH, облачные и внутренние сервисы.
ХАРАКТЕРИСТИКИ
Технические преимущества
Удобная разработка
Продуманные интеграции
Безопасность
Эксплуатация
GitOps. Git Sync синхронизирует проекты из репозитория.
Высокая доступность. HA-планировщик, выделенные DAG Processor и Triggerer, поддержка кластерного Redis, метаданные в ADP.
DuckDB. Iceberg и Paimon, каталоги через Hive Metastore ADH, секреты через плагин OpenBao.
Горизонтальное масштабирование. Celery-воркеры добавляются через ADCM по мере роста нагрузки.
КОММЕРЧЕСКИЕ РЕШЕНИЯ
Astronomer, Prefect Cloud
Функциональность коммерческих оркестраторов в собственном контуре.
Сертифицированный продукт
Arenadata Orchestrator соответствует требованиям российских регуляторов.
ПодробнееЗарегистрирован в Роспатент.
2026664326 от 14.05.2026
Российские операционные системы
Продукт поддерживает популярные ОС, такие как РЕД ОС, ALT Linux и Astra Linux.
ALT Linux8.4 SP и 10.2 SP
РЕД ОС7.3 Сертифицированная редакция
Astra Linux SE1.7.6 и 1.8.4, «Орёл» и «Воронеж»
А также зарубежные OC
Ubuntu22.04 LTS
- Подробнее
Аккредитация Минцифры России
Компании Группы Arenadata включены в реестр аккредитованных организаций.
Безопасный код
Оперативно правим CVE при выявлении уязвимостей в версиях продуктов Open Source.
ОТЛИЧИЯ
Отличия от Open Source
ADO строится на базе Apache Airflow: открытое ядро плюс enterprise-обвязка.
РОССИЙСКАЯ РАЗРАБОТКА
Сертификация. ADO зарегистирован в Роспатент №2026664326 от 14.05.2026.
Проверенная совместимость. Продукт разработан для работы с отечественными ОС, серверным оборудованием и с дата-системами российских вендоров.
Оригинальная документация. Подробная документация ADO составляется для каждого релиза и всегда в актуальном состоянии.
Техническая поддержка 24×7. Поддержка на русском языке с прямой передачей сложных тикетов в разработку.
СОБСТВЕННЫЕ ИНСТРУМЕНТЫ
Жизненный цикл. Установка, апгрейд, откат версии, изменение топологии и режим обслуживания через ADCM.
GitOps из коробки. Сервис GitSync вместо самодельной доставки DAG.
Мониторинг из коробки. Prometheus и Grafana: дашборды хостов, кластера Airflow, DAG и очередей Celery; Flower для воркеров.
Управляемые окружения. Централизованное управление Python-зависимостями через ADCM.
ЭКСПЕРТИЗА
Безопасность. Соединения и пароли хранятся в HashiCorp Vault, а не в коде DAG; Kerberos и SSL настраиваются через ADCM; доступ в веб-интерфейс – по ролям.
Гарантированная совместимость. Все компоненты протестированы на совместимость до и после обновлений.
Редакции
Различие редакций
Сервисы
HashiCorp Vault
Airflow
GitSync
Поддержка российских операционных систем
Ubuntu
22.04.2 LTS
22.04.2 LTS
ALT Linux
10.2 SP
РЕД ОС
7.3 Сертифицированная редакция
Astra Linux SE
1.7.6 и 1.8.4, «Орел» и «Воронеж»
Возможности
Высокая доступность и DR
Offline-установка
Автоматизация развертывания и апгрейдов
Техническая поддержка 24/7
Апгрейд Community → Enterprise поддерживается без переустановки.
СЕРВИСЫ
Профессиональные услуги
Ваша уверенность в успехе реализации проекта на каждом этапе.
СОПРОВОЖДЕНИЕ
Техническая поддержка
Arenadata Orchestrator под надежным контролем.
24/7
Ваши задачи решаются без пауз и задержек, независимо от времени суток.
50+
Технических экспертов с опытом администрирования и разработки высоконагруженных решений.
1000+
Мы поддерживаем более тысячи кластеров заказчиков в самых различных отраслях.
99%
Соблюдаем SLA c высоким качеством обслуживания и надежности предоставляемых услуг.
500+
Обращений в месяц решает команда технической поддержки.
2
Языка службы поддержки: русский и английский.
FAQ
Часто задаваемые вопросы
Мы всегда на связи, и если у вас остались вопросы по нашему продукту, напишите нам и мы обязательно ответим.
ADO собирает Apache Airflow в промышленный дистрибутив: установка и апгрейды через ADCM, GitOps-доставка DAG через GitSync, dbt и DuckDB из коробки, протестированные провайдеры к продуктам Arenadata, мониторинг на Prometheus/Grafana, режим обслуживания, откат после апгрейда, централизованное управление Python-зависимостями, offline-установка, поддержка российских ОС и техподдержка 24/7.
С ванильного Apache Airflow – DAG на Python переносятся без изменений. С Airflow из состава ADH – первый релиз ADO выпущен с сохранением совместимости с ним. Сценарии cron и Oozie переносятся путем переписывания Python DAG.
Номер линейки ADO следует за версией Airflow внутри: ADO 2.6.3.x – Airflow 2.6.3, ADO 2.10.5.1 – Airflow 2.10.5, ADO 2.11.1.1 – Airflow 2.11.1.
HA-планировщик Airflow 2 (несколько экземпляров scheduler), выделенные компоненты DAG Processor и Triggerer, кластерный Redis для очереди Celery. Функции высокой доступности и аварийного восстановления входят в Enterprise-редакцию.
Это запуск конвейера по готовности данных: зависимый DAG стартует, когда другой DAG обновил датасет (механизм Datasets). В связке с dbt это позволяет строить ELT, который реагирует на приход данных, а не на время.
DuckDB – in-process аналитическая база для работы с данными прямо в задачах конвейера: перекачка и трансформация без внешнего кластера, чтение и запись Iceberg и Paimon, каталоги через Hive Metastore ADH, секреты через плагин OpenBao.
Горизонтально: Celery-воркеры добавляются через ADCM по мере роста нагрузки, очередь на кластерном Redis.
Провайдеры покрывают ADB, ADH (включая Ozone и HBase), ADQM, ADP и ADS; адаптер dbt Greengage выполняет трансформации в ADB; общие (shared) хосты позволяют ставить клиенты сервисов (например, Spark-клиент ADH), на узлы ADO; все кластеры платформы управляются одним ADCM.
Соединения и переменные хранятся в HashiCorp Vault, а не в коде DAG; Kerberos и SSL/TLS управляются через ADCM (действия Manage Kerberos и Manage SSL); доступ к веб-интерфейсу разграничивается ролевой моделью Airflow; чувствительные параметры конфигурации имеют тип secret и не показываются в открытом виде; для закрытых контуров поддерживается offline-установка.
Версия Community бесплатна: встроенная функциональность Airflow, работает на Ubuntu 22.04 LTS. Enterprise добавляет GitSync и HashiCorp Vault, высокую доступность и аварийное восстановление, автоматизацию развертывания и апгрейдов, offline-установку, поддержку российских ОС, расширенные инструменты управления и мониторинга, техподдержку 24/7 и корпоративное обучение. Поддерживается апгрейд Community → Enterprise без переустановки.
Ядро – open source: Apache Airflow и dbt Core под Apache 2.0, DuckDB под MIT. Конвейеры – обычные Python DAG и SQL-модели dbt, они переносимы на любой совместимый стек Airflow/dbt, что снижает риск вендорной привязки. Enterprise-функции требуют коммерческой лицензии Arenadata.