Создание рабочей области Fabric для FinOps

В этой статье описывается создание и настройка рабочей области Microsoft Fabric для FinOps. Он содержит пошаговое руководство по созданию и настройке настройки Azure Data Lake Storage (ADLS), экспорта данных, создания рабочей области и приема данных. По завершении можно использовать Power BI для создания отчетов.

Предварительные условия

Перед началом работы убедитесь, что у вас есть перечисленные ниже ресурсы.

• Платная подписка Azure с информацией о затратах и использовании
• Владелец учетной записи хранения или имеющий доступ для предоставления разрешений к учетной записи хранения
• При использовании проверки подлинности с помощью учетной записи организации необходимо иметь роль участника данных хранилища Blob. Если у вас нет необходимых разрешений, можно использовать другие типы проверки подлинности, такие как ключ учетной записи. В противном случае возникает Invalid credentials ошибка.

Для выполнения этого пошагового руководства вы создадите следующие ресурсы, которые несут затраты:

• Учетная запись Azure Data Lake Storage 2-го поколения
• Рабочая область Power BI
• Рабочая область «Fabric»

Создание и настройка Azure Data Lake Storage

Microsoft Fabric оптимизирован для работы с учетными записями хранения с включенным иерархическим пространством имен, также известным как Azure Data Lake Storage 2-го поколения. У вас есть два варианта получения учетной записи хранения Data Lake:

• Вариант 1. Создание учетной записи хранения Data Lake см. в статье "Создание учетной записи хранения для Azure Data Lake Storage 2-го поколения".
• Вариант 2: Чтобы включить иерархическое пространство имен в существующей учетной записи хранения, см. раздел «Обновление Azure Blob Storage с использованием возможностей Azure Data Lake Storage Gen2».

В следующем примере мы использовали следующую учетную запись хранения Data Lake 2-го поколения. Вы используете собственный аккаунт хранения и данные о подписке.

• Подписка = подписка Contoso.
• Учетная запись хранения = Contoso-storage-account.

Экспорт данных о затратах

Так как мы создаем рабочую область, оптимизированную для FinOps, мы экспортируем данные о затратах с помощью Спецификации Open Cost and Usage Specification (FOCUS), формат данных, независимый от поставщика для получения сведений о затратах. Все наши примеры используют FOCUS, но вы также можете использовать существующие экспорты фактических или амортизированных затрат с включенной перезаписью файлов.

Дополнительные сведения о ФОКУСе и его преимуществах см. в разделе Что такое FOCUS. Фонд FinOps также предлагает бесплатный курс "Введение в ФОКУС". Решения Microsoft Power BI для FinOps соответствуют FOCUS.

Сведения о создании экспорта см. в разделе "Создание экспорта".

Ниже приведены высокоуровневые шаги по созданию экспорта:

1. Войдите в портал Azure, https://portal.azure.comвыполните поиск по запросу "Управление затратами".
2. Выберите требуемую область и выберите пункт "Экспорты " в меню навигации слева.
3. Выберите + Создать
4. На вкладке "Основные сведения" выберите шаблон = затраты и использование (FOCUS)
5. На вкладке "Наборы данных" введите префикс экспорта, чтобы убедиться, что у вас есть уникальное имя для экспорта. Например, июнь2024фокус.
6. На вкладке "Назначение" выберите:
   • Тип хранилища = хранилище BLOB-объектов Azure
   • Назначение и хранилище = использование существующих
   • Подписка = подписка Contoso
   • Учетная запись хранения = учетная запись хранения Contoso
   • Container = msexports
   • Directory = focuscost/<scope-id>
   • Тип сжатия = Нет.
   • Перезапись данных = Включено
7. На вкладке "Просмотр и создание" нажмите кнопку "Создать".
8. Запустите экспорт, нажав кнопку "Запустить сейчас " на странице экспорта.

Перед переходом к следующему шагу убедитесь, что экспорт завершен и доступен файл.

Если вы хотите автоматизировать создание экспорта, попробуйте использовать команду New-FinOpsCostExport в модуле PowerShell набора средств FinOps.

Если вы развернули центры FinOps, этот шаг можно пропустить и использовать обработанные данные в хранилище концентраторов.

Создайте рабочее пространство Fabric

Если у вас уже есть рабочая область Microsoft Fabric, можно пропустить создание новой рабочей области, если вы не хотите хранить ресурсы FinOps отдельно от других.

Если вы не настроили Microsoft Fabric, см. статью "Включить Microsoft Fabric для вашей организации".

1. Войдите в приложение Fabric с помощью бесплатной учетной записи Fabric или учетной записи Microsoft Power BI.
2. Вы можете создать рабочую область для ресурсов FinOps или использовать существующую рабочую область. Сведения о создании рабочей области см. в разделе "Создание рабочей области".

Если вы не знакомы с Microsoft Fabric или не включили емкость Fabric, ознакомьтесь с пробной версией Fabric. Если пробные версии Fabric отключены, может потребоваться создать новую емкость Fabric.

Ваша организация несет затраты за использование емкости Nontrial Fabric. Смотрите цены на Microsoft Fabric.

Ниже приведен пример снимок экрана, показывающий создание новой рабочей области Fabric.

Создать lakehouse

Microsoft Fabric Lakehouse — это архитектуры данных, позволяющие организациям хранить структурированные и неструктурированные данные в одном расположении и управлять ими. Они используют различные инструменты и платформы для обработки и анализа данных. Эти средства и платформы могут включать запросы на основе SQL и аналитику, машинное обучение и другие методы расширенной аналитики.

Вы можете создать новый lakehouse или использовать существующий. Lakehouses взаимодействуют, поэтому мы, как правило, рекомендуем использовать один лейкхаус для всех наборов данных FinOps. Единая архитектура lakehouse позволяет хранить связанные данные вместе для совместного использования моделей данных, потоков обработки данных и мер безопасности.

Чтобы создать новое озеро в рабочей области Fabric, выберите следующее:

1. Войдите в приложение Fabric с помощью бесплатной учетной записи Fabric или учетной записи Microsoft Power BI.
2. Выберите рабочую область, в которой вы хотите создать озерный дом.
3. В левом верхнем углу страницы нажмите кнопку +Создать , а затем нажмите кнопку "Дополнительные параметры".
   
4. Выберите Lakehouse
   

Дополнительные сведения см. в разделе "Создание озера".

Создайте ярлык для хранилища

Сочетания клавиш в Lakehouse позволяют ссылаться на данные без копирования. Он объединяет данные из различных хранилищ данных, рабочих областей или внешних хранилищ, таких как Data Lake Gen2 или Amazon Web Services (AWS) S3. Вы можете быстро сделать большие объемы данных доступными в Lakehouse локально, без задержки, связанной с копированием данных из источника.

См. раздел «Создание ярлыка для Azure Data Lake Storage 2-го поколения», чтобы создать ярлык.

1. Войдите в приложение Fabric с помощью бесплатной учетной записи Fabric или учетной записи Microsoft Power BI.
2. Выберите дом у озера по вашему выбору.
3. Выберите многоточие (...) рядом с Файлы.
   Вы добавляете CSV-файлы и Parquet в разделе "Файлы". Разностные таблицы добавляются в таблицы.
4. Выберите Новый ярлык.
   
5. Выберите Azure Data Lake Storage 2-го поколения и укажите следующие параметры:
   • URL = URL-адрес Data Lake Storage учетной записи хранилища Data Lake. См. следующее примечание о проверке подлинности.
   • Подключение = создание нового подключения
   • Имя подключения = <любое имя выбранного имени>
   • Тип проверки подлинности = учетная запись организации
   • Войдите в систему, когда вас об этом попросят.

Ниже приведен пример снимка экрана с параметрами нового сочетания клавиш.

Чтобы получить URL-адрес Data Lake Storage, просмотрите учетную запись хранения, в которой экспорт создал каталог и файл затрат FOCUS. В разделе "Параметры" выберите "Конечные точки". Скопируйте URL-адрес, помеченный как Data Lake Storage.

Вот пример снимка экрана с URL-адресом Data Lake Storage на странице конечных точек.

Копирование данных в Fabric

После создания ярлыка можно просмотреть данные о затратах FOCUS в Файлы. Данные можно загрузить непосредственно в Fabric с помощью одного из следующих методов на основе ваших требований. Следующие вкладки предоставляют два варианта:

#!/usr/bin/env python
# coding: utf-8

# ## Sample Read CSV to Delta Output
# 
# Exports Platform Demo Notebook

# # Export to Delta Parquet

# In[1]:
read_path = '<USER INPUT>' # input path to your data stream
export_table = '<USER INPUT>' # output path for your delta parquet table, ex: "Tables/CostDetails" 

# In[3]:
df = spark.read.format("csv").option("header", "true").option("inferSchema", "true").option("recursiveFileLookup", "true").load(read_path) 
     
''' Use this for parquet reading 
df = spark.read.format("parquet").option("header", "true").option("inferSchema", "true").option("recursiveFileLookup", "true").load(read_path) 
''' 

# In[4]:
''' Use this if you want to overwrite the schema as well 
df.write.mode("overwrite").format("delta").option("overwriteSchema", "true").save(export_table) 
''' 
df.write.mode("overwrite").format("delta").save(export_table) 

Создание отчета Power BI

После загрузки данных в Fabric и подготовки таблиц можно перейти к созданию отчетов.

1. Войдите в приложение Fabric с помощью бесплатной учетной записи Fabric или учетной записи Microsoft Power BI.
2. Выберите рабочую область, где вы создали "lakehouse", а затем выберите "lakehouse".
3. В области обозревателя выберите таблицы и выберите созданную таблицу.
4. В верхней части страницы выберите "Новая семантическая модель " и назовите модель. Дополнительные сведения см. в разделе "Семантические модели Power BI по умолчанию".
5. Выберите символ Power BI в нижнем левом углу.
6. Выберите ту же семантику для создания отчетов, а затем используйте Copilot для создания аналитических сведений из полученных данных.

Оставить отзыв

Сообщите нам ваше мнение о нашей работе, оставив краткий отзыв. Эти отзывы используются для улучшения и расширения средств и ресурсов FinOps.

Если вы ищете что-то конкретное, проголосуйте за существующую или создайте новую идею. Поделитесь идеями с другими пользователями, чтобы получить больше голосов. Мы сосредоточимся на идеях с большинством голосов.

Связанный контент

Связанные продукты:

• Управление затратами

Связанные решения:

• Центры FinOps
• Отчеты Power BI для набора средств FinOps