Поделиться через


Что такое материализованные представления озера в Microsoft Fabric?

Замечание

Эта функция сейчас доступна в предварительной версии.

Материализованные представления озера в Microsoft Fabric упрощают реализацию архитектуры Medallion, значительно повышая управление данными. Эта функция помогает в создании, управлении и мониторинге представлений и улучшении преобразований с помощью декларативного подхода. Разработчики могут сосредоточиться на создании аналитических сведений, производных от данных, а не на обслуживании инфраструктуры.

Ключевые функции и преимущества

  • Декларативные конвейеры: mlVs позволяет пользователям управлять преобразованиями данных с помощью декларативного подхода, упрощая выполнение без необходимости вручную настраивать или поддерживать отдельные конвейеры. Этот подход также поддерживает определение правил качества данных и указание способа обработки любых возникающих нарушений.

  • Визуализация и мониторинг. Разработчики могут визуализировать происхождение всех сущностей в Lakehouse, просматривать зависимости и отслеживать ход выполнения. Конвейер обработки оптимизирован для повышения производительности за счет обновления данных в соответствующей последовательности, управления оптимальными параллельными путями и обновления только тех частей линейки данных, которые изменились. Эта функция предоставляет интегрированный отчет о качестве данных, который выделяет тенденции качества данных. Кроме того, оповещения можно настроить на основе любого условия, связанного с нарушениями правил качества данных.

Замечание

  • Эта функция будет развернута в регионах с северной частью США, южной Индии емкостью в ближайшие несколько недель.
  • Эта функция в настоящее время доступна в Южной Части Великобритании, Восточной Канаде, Центрально-Западной Германии, Центрально-Западной Германии, Центральной Италии, Северной Норвегии, Восточной Норвегии, Центрально-Южной Африки, Северной Части Испании, Центральной Швеции, Центральной Швеции, Центрально-Западной, Великобритании, Западной Великобритании, Восточной Швейцарии, Восточной Австралии, Юго-Восточной Австралии, Южной Бразилии, Центральной Индии, Восточной Азии, восточной части США, восточной части США 2, Восточной Японии, восточной части Японии Западная Япония, Центральная Корея, Центральная Мексика, Юго-Восточная Азия, Северная Азия ОАЭ, Западная часть США, Западная часть США 2 Западная часть США 3, Северная Европа, Регионы емкости Западной Европы.

Текущие ограничения

Следующие функции пока недоступны для визуализации машинного обучения в Microsoft Fabric:

  • Декларативная поддержка синтаксиса PySpark находится на схеме развития и будет доступна в будущих обновлениях. В то же время можно использовать синтаксис Spark SQL для создания и обновления машинного обучения.
  • Возможности добавочного обновления планируются для предстоящих выпусков для повышения свежести и эффективности данных. В настоящее время все операции обновления выполняются как полные обновления.
  • Поддержка API для управления MLV в настоящее время не осуществляется.
  • Функции связности и исполнительные возможности для кросс-лакехаусов активно изучаются для будущей интеграции.