Примечание.
Для доступа к этой странице требуется авторизация. Вы можете попробовать войти или изменить каталоги.
Для доступа к этой странице требуется авторизация. Вы можете попробовать изменить каталоги.
Примечание.
Задание Apache Airflow работает под управлением Apache Airflow.
Apache Airflow — это платформа с открытым исходным кодом, используемая для программного создания, планирования и мониторинга сложных заданий. Он позволяет определить набор задач, которые называются операторами, которые можно объединить в ациклические графы (DAG) для представления конвейеров.
Задание Apache Airflow предоставляет простой и эффективный способ создания сред Apache Airflow и управления ими, что упрощает выполнение заданий оркестрации. В этом кратком руководстве мы создадим простое задание Apache Airflow, чтобы ознакомиться с средой и функциями задания Apache Airflow.
Создание задания Apache Airflow
Можно использовать существующую рабочую область или создать новую рабочую область.
Разверните раскрывающийся список + Новый элемент, а затем в разделе Фабрика данных выберите Задание Apache Airflow
Присвойте проекту подходящее имя и нажмите кнопку "Создать ".
Создание ФАЙЛА DAG
Выберите новую карточку DAG , присвойте файлу имя и нажмите кнопку "Создать".
Вам представлен стандартный код DAG. Файл можно изменить в соответствии с вашими требованиями.
Нажмите кнопку "Сохранить".
Запуск DAG
Начните с нажатия кнопки "Запустить DAG ".
После инициирования появится уведомление, указывающее, что запускается DAG.
Чтобы отслеживать ход выполнения DAG, выберите "Просмотреть сведения " в центре уведомлений. Это действие перенаправит вас в пользовательский интерфейс Apache Airflow, где можно удобно отслеживать состояние и сведения о запуске DAG.
Мониторинг DAG Apache Airflow в пользовательском интерфейсе Apache Airflow
Сохраненные файлы dag загружаются в пользовательский интерфейс Apache Airflow. Их можно отслеживать, нажав кнопку "Монитор" в Apache Airflow .