Журнал запросов доступа к декларативным конвейерам Lakeflow

В этой статье объясняется, как получить доступ к историям запросов и профилям запросов, связанным с запусками Декларативных конвейеров Lakeflow. Эти сведения можно использовать для отладки запросов, определения узких мест производительности и оптимизации запусков конвейера.

Требования

• Ваш конвейер процессов должен быть настроен для запуска в режиме с триггером.

Проверьте историю запросов для обновления конвейера

Для всех конвейеров, удовлетворяющих требованиям, инструкция запроса отображается в журнале запросов при обновлении материализованных представлений и потоковых таблиц. Существует одна инструкция REFRESH для каждого выполнения потока, обновляющего целевую таблицу. Вы можете использовать фильтр вычислений на странице журнала запросов, чтобы отобразить только запросы, обработанные с помощью декларативных конвейеров Lakeflow. Дополнительные сведения о пользовательском интерфейсе журнала запросов см. в разделе История запросов.

Чтобы получить доступ к сведениям о запросе, выполните следующие действия.

1. Щелкните Журнал запросов на боковой панели.
2. Выберите флажок DLT из фильтра выпадающего списка вычислительных операций.
3. Щелкните на запрос, чтобы просмотреть сводные сведения, включая длительность запроса и сводные показатели.
4. Щелкните Просмотреть профиль запроса, чтобы открыть профиль запроса. Дополнительные сведения о профиле запроса см. в профиле запроса.
5. При необходимости, используйте ссылки в разделе Источник запроса для открытия связанного конвейера.

Доступ к журналу запросов из записной книжки

Чтобы просмотреть журнал запросов из записной книжки, подключенной к конвейеру, выполните следующие действия.

1. Откройте записную книжку. Если записная книжка подключена к конвейеру, интерфейс для проверки конвейера отображается в нижней части записной книжки. См. разработку и отладку ETL-пайплайнов с помощью ноутбука в Lakeflow Declarative Pipelines.
2. Перейдите на вкладку Журнал запросов конвейеров.
3. Щелкните имя запроса, чтобы просмотреть сведения о запросе, такие как длительность, источник запроса и другие агрегированные метрики. Чтобы узнать больше о подробностях, доступных в этом представлении, ознакомьтесь с разделом Просмотр сведений о запросе.

Доступ к истории запросов через интерфейс Lakeflow Declarative Pipelines

На странице сведений о конвейере в пользовательском интерфейсе Декларативных конвейеров Lakeflow щелкните вкладку "Журнал запросов " в нижней части экрана, чтобы получить доступ к журналу конвейера. Вы можете просмотреть панель сведений о запросе и профиль, щелкнув по выражению.

Ограничения

• Время подготовки ресурсов и ожидания недоступно.
• Метрики, отображаемые на панели сведений о запросе, обновляются в реальном времени во время выполнения потока, но профиль запроса обновляется только после завершения выполнения потока.