Поделиться через


Используйте действие Dataflow для запуска Dataflow Gen2

Действие Dataflow в Data Factory для Microsoft Fabric позволяет запускать Dataflow Gen2.

Необходимые условия

Чтобы приступить к работе, необходимо выполнить следующие предварительные требования:

Добавьте операцию потока данных в конвейер.

Чтобы использовать действие потока данных в конвейере, выполните следующие действия.

Создайте мероприятие

  1. Создайте конвейер в рабочей области.

  2. Найдите поток данных в области действий конвейера и выберите его, чтобы добавить его на холст конвейера.

    снимок экрана пользовательского интерфейса Fabric с панелью действий и выделенной активностью потока данных.

  3. Выберите новое действие потока данных на холсте, если оно еще не выбрано.

    Скриншот, показывающий вкладку

Обратитесь к руководству по настройкам Общих параметров, чтобы настроить вкладку Общих настроек.

Замечание

Время ожидания и отмена применяются только к Dataflow Gen2 с поддержкой CI/CD. При запуске потоков данных 2-го поколения без поддержки CI/CD тайм-ауты игнорируются, и отмена пайплайна не остановит запуск потока данных.

Параметры действия потока данных

Перейдите на вкладку "Настройки", затем выберите существующую рабочую область и поток данных для запуска. Если вы создали Dataflow Gen2 с поддержкой интеграции CI/CD и Git (предварительная версия), вы также можете выбрать его из раскрывающегося списка.

Снимок экрана, показывающий выпадающее меню с перечнем потоков данных для выбора во вкладке "Настройки активности потока данных"

В настоящее время параметр уведомления недоступен.

При выборе потока данных 2-го поколения с поддержкой CI/CD с включенным режимом общедоступных параметров отображается раздел параметров потока данных, в котором перечислены все доступные параметры, их типы и значения по умолчанию для выбранного потока данных.

Снимок экрана, показывающий вкладку

Обязательные параметры отображаются со звездочкой рядом с их именем, в то время как необязательные параметры не имеют звездочки. Кроме того, необязательные параметры можно выбрать и удалить из сетки, но необходимые параметры нельзя удалить и передать для запуска потока данных.

Вы можете выбрать кнопку обновления, чтобы запросить последние сведения о параметрах из потока данных.

В разделе параметров потока данных можно ввести имя параметра, который требуется передать, и тип и значение, которое необходимо передать.

Замечание

Параметризация DataflowId в параметрах действия конвейера потока данных поддерживает только устаревшую версию потока данных 2-го поколения без поддержки CI/CD. То есть невозможно вызвать потоки данных с поддержкой CI/CD с помощью параметризации DataflowId.

Сохраните и запустите или запланируйте конвейер

Перейдите на вкладку "Главная " в верхней части редактора конвейера и нажмите кнопку "Сохранить", чтобы сохранить конвейер. Выберите "Выполнить" , чтобы запустить его напрямую или запланировать выполнение в определенный момент времени или интервалы. Дополнительные сведения о запусках конвейера см. в статье "Планирование запусков конвейера".

снимок экрана: вкладка

После выполнения можно отслеживать выполнение конвейера и просматривать журнал выполнения с вкладки "Выходные данные " под холстом.

Замечание

Чтобы успешно запустить поток данных 2-го поколения (CI/CD), пользователям необходимо:

  • Доступ члена (или более высокого уровня) к рабочей области и
  • Доступ ко всем подключениям, используемым потоком данных

Не соответствовать этим двум требованиям может привести к сбоям выполнения.

Советы по устранению неполадок

Caution

Сведения об ошибках, показанные в действии потока данных, могут быть неполными или частичными. Не полагайтесь исключительно на информацию, показанную в активности потока данных, для устранения неполадок.

Подсказка

Подробные сведения о выполнении потока данных можно найти в диалоговом окне "Последние запуски ", доступном в потоке данных 2-го поколения (CI/CD) и в обозревателе рабочих областей.

При устранении неполадок при выполнении потока данных настоятельно рекомендуется начать с раздела Dataflow Gen2 (CI/CD) recent runs, где вы можете скачать подробные журналы конкретного запуска. Если поток данных использовал локальный шлюз данных, вы также можете изучить подробные журналы шлюза, найденные на компьютере, где установлен шлюз.

Вы также можете запросить поддержку через форум сообщества Fabric или создать специальное дело поддержки , где один из наших инженеров сможет помочь.

Известные проблемы

  • Использование служебного принципала для запуска записной книжки, содержащей код семантической ссылки, имеет ограниченные функциональные возможности и поддерживает только подмножество функций семантической ссылки. Дополнительные сведения см. в поддерживаемых функциях семантической связи . Чтобы использовать другие возможности, рекомендуется вручную пройти проверку подлинности семантической связи с помощью субъекта-службы.
  • Некоторые клиенты могут не видеть выпадающий список идентификатора рабочего пространства (WI) или видеть его, но не могут создать подключение. Это происходит из-за известной проблемы в одном из основных компонентов платформы. Исправление в настоящее время находится в процессе работы.

Как следить за выполнением конвейера