Быстрее запускайте надежные
рабочие процессы данных
Проектируйте, планируйте и запускайте сложные конвейеры данных с управлением без лишнего кода, контролем релизов и надежностью производственного уровня.
Доступно в AWS Marketplace Построено на Apache DolphinScheduler Проектирование процессов без лишнего кода для производственных конвейеров
Высокая доступность и отказоустойчивость
HA-архитектура с ведущими и рабочими узлами, автоматическое переключение при сбоях и отсутствие единой точки отказа
Продвинутое планирование
Запуск по cron, событиям, зависимостям и в пакетном режиме
Мониторинг и оповещения
Мониторинг в реальном времени, настраиваемые уведомления и контроль SLA
Безопасность и соответствие требованиям
RBAC, интеграция LDAP/SSO, журналы аудита и шифрование
Масштабируемость
Горизонтальная масштабируемость для тысяч параллельных процессов
Возможности продукта
Проектируйте и запускайте рабочие процессы для промышленной эксплуатации визуально
Моделируйте сложные зависимости, быстро настраивайте логику задач и переходите от черновика к запуску по расписанию без дополнительного инструментария для оркестрации.
Экосистема задач
30+ встроенных типов задач для быстрого запуска
Закрывайте загрузку данных, вычисления, SQL, уведомления и этапы машинного обучения без необходимости связывать между собой отдельные планировщики.
Возможности
Релизы, исполнение и надежность на одной платформе
Дайте командам по работе с данными единый слой оркестрации для проектирования процессов, управления развертыванием, отказоустойчивости и контроля выполнения.
Полноценное планирование экосистемы
Запускайте широкий набор задач обработки данных в одном планировщике с большим набором встроенных компонентов и управлением исполнением с учетом версий.
Проектируйте процессы так, как удобно вам
Собирайте DAG через визуальные инструменты, код или импорт из таблиц, чтобы команды быстрее запускали процессы.
Релизы без лишнего риска
Продвигайте процессы между средами с подходом к развертыванию, удобным для CI/CD, упаковки и управления релизами.
Готово для пакетной и потоковой обработки
Управляйте пакетными и потоковыми нагрузками в публичном, частном и гибридном облаке.
Контроль исполнения для защиты SLA
Снижайте число сбоев благодаря отказоустойчивости, перезапускам и контролю выполнения в производственной среде.
Гибкие правила бизнес-времени
Управляйте календарями, временем отсечки и временной логикой между командами без ручной координации.
Основа с открытым исходным кодом
Корпоративная оркестрация на базе Apache DolphinScheduler
Начните с ядра Apache, затем добавьте усиленную безопасность, более высокую стабильность и корпоративный контроль рабочих процессов.
Apache DolphinScheduler
DolphinScheduler — проект Apache Software Foundation. Он предоставляет распределенную и расширяемую платформу оркестрации рабочих процессов с открытым исходным кодом и мощным визуальным интерфейсом для DAG-графов.
WhaleScheduler построен на этой основе и добавляет корпоративные возможности, усиленную безопасность и более высокую операционную стабильность.
Почему WhaleScheduler
Сравните решения с открытым исходным кодом и корпоративную оркестрацию
Сопоставьте возможности оркестрации сообщества с контролем, безопасностью и операционной поддержкой, которые нужны корпоративным командам.
Открытый исходный код
DolphinScheduler
Корпоративная версия
WhaleScheduler
Планирование
Управление пакетными рабочими процессами
Планирование
Управление пакетными рабочими процессами
Анализ происхождения SQL на базе IDE и связей между рабочими процессами
Задачи с условным запуском
Планирование рабочих процессов по бизнес-дате
Пользовательские календари и управление датами
Поддерживаемые компоненты
Компоненты обработки данных с открытым исходным кодом, такие как DataX, Sqoop и SeaTunnel
Интерфейс с перетаскиванием элементов и генерация рабочих процессов на Python
Альфа-версия управления качеством данных
Поддерживаемые компоненты
Разработка в облачной IDE и единая отладка для SQL и других языков
Компоненты с открытым исходным кодом и традиционные ETL-инструменты, такие как Informatica
Компоненты больших данных с открытым исходным кодом и хранилища, такие как Teradata и Greenplum
Интерфейс с перетаскиванием элементов и генерация рабочих процессов на Python
Создание рабочих процессов и задач через импорт Excel
Управление качеством данных
Отладка во время выполнения
Перезапуск, пауза и остановка рабочих процессов
Отладка во время выполнения
Перезапуск, пауза, остановка рабочих процессов, изоляция задач и управление приоритетами
Базовые оповещения по рабочим процессам на основе абсолютного времени
Многоуровневая отладка рабочих процессов и IDE
Онлайн-импорт и экспорт развертываний между несколькими средами
Операционные функции
Не поддерживается
Операционные функции
Интегрированное операционное управление для разработки, тестирования и производственной среды с GitHub и GitLab
Права доступа и аудит
Контроль только на уровне пользователя и тенанта
Базовые журналы аудита
Права доступа и аудит
Центр управления правами на основе ролей с интеграцией корпоративных систем
Журналирование аудита уровня финансовых организаций
Уязвимости безопасности
Обнаружение багов силами сообщества без выделенной поддержки
Уязвимости безопасности
Стороннее тестирование безопасности и устранение уязвимостей корпоративного уровня
Отраслевое тестирование и доработка для гарантии качества
Сервисы и поддержка
Не поддерживается
Сервисы и поддержка
Поддержка сред IT-инноваций, таких как KP-V10, TDSQL и DaMeng
Производительность
Поддерживает миллионы задач и работает быстрее инструментов вроде Airflow
Производительность
Системные улучшения существенно повышают пропускную способность и параллелизм
Стабильность
Зависит от обратной связи сообщества и обнаружения проблем
Стабильность
Профессиональное тестирование и исправление багов
8 000+ часов нагрузочной и стабильностной валидации для коммерческой версии
Эксплуатация и сопровождение
Не поддерживается
Эксплуатация и сопровождение
Комплексный мониторинг системных метрик
Сервисная поддержка
Не поддерживается
Сервисная поддержка
Профессиональные услуги по установке, развертыванию, отладке, обновлению и поддержке