Ссылка на таблицу учёта системы платного использования

В этой статье представлен обзор системной таблицы биллингового использования, включая структуру и примеры запросов. В системных таблицах данные о выставляемом по счету использовании вашей учетной записи централизованы и перенаправлены во все регионы, чтобы вы могли просматривать общую активность вашей учетной записи из любого региона, где находится ваша рабочая область.

Сведения об использовании этой таблицы для мониторинга затрат и примеров запросов см. в статье "Мониторинг затрат с помощью системных таблиц".

Путь к таблице: эта системная таблица расположена по адресу system.billing.usage.

Схема таблицы использования с выставлением счетов

В таблице системы использования с выставлением счетов используется следующая схема:

Справочник по метаданным об использовании

Значения в usage_metadata представляют собой строки, которые сообщают вам об объектах и ресурсах рабочей области, участвующих в записи об использовании.

Только подмножество этих значений заполняется в любой заданной записи использования в зависимости от типа вычислений и используемых функций. Третий столбец в таблице показывает, какие типы использования вызывают заполнение каждого значения.

Справочник по метаданным идентичности

В столбце identity_metadata содержатся дополнительные сведения об идентификаторах, задействованных в использовании.

• Поле run_as фиксирует, кто выполнял рабочую нагрузку. Эти значения заполняются только для определенных типов рабочих нагрузок, перечисленных в таблице ниже.
• Поле owned_by применяется только к использованию хранилища SQL и регистрирует пользователя или субъекта-службы, который владеет хранилищем SQL, ответственным за использование.

• Поле identity_metadata.created_by относится к Databricks Apps и регистрирует сообщение электронной почты пользователя, создавшего приложение.

идентификации для запуска от имени

Запись идентификатора в identity_metadata.run_as зависит от продукта, связанного с использованием. См. следующую таблицу поведения identity_metadata.run_as:

Ссылка на тип записи

Таблица billing.usage поддерживает исправления. Исправления возникают, когда любое поле записи об использовании неправильно и должно быть исправлено.

При исправлении Azure Databricks добавляет две новые записи в таблицу. Запись отзыва отрицает исходную неправильную запись, а затем запись перепрописи содержит исправленную информацию. Записи исправления определяются по полю record_type.

• RETRACTION: используется для отмены исходного неправильного использования. Все поля идентичны ORIGINAL записи, кроме usage_quantity, отрицательного значения, которое отменяет исходное количество потребления. Например, если количество использования исходной записи было 259.4356, то запись аннулирования будет иметь количество использования -259.4356.
• RESTATEMENT: запись, содержащая правильные поля и количество использования.

Например, следующий запрос возвращает правильное количество почасового использования, связанное с job_id, даже если были внесены исправления. Агрегируя количество использования, резервная запись устраняет исходную запись, и возвращаются только значения повторной записи.

SELECT
  usage_metadata.job_id, usage_start_time, usage_end_time,
  SUM(usage_quantity) as usage_quantity
FROM system.billing.usage
GROUP BY ALL
HAVING usage_quantity != 0

Справочник по ссылке на продукт-источник выставления счетов

Некоторые продукты Databricks оплачиваются по одному общему номенклатурному номеру SKU. Например, мониторинг Lakehouse, прогнозная оптимизация и бессерверные рабочие процессы оплачиваются по одному SKU для бессерверных заданий.

Чтобы отличить использование, столбцы billing_origin_product и product_features предоставляют дополнительные сведения о конкретном продукте и функциях, связанных с использованием.

В столбце billing_origin_product показан продукт Databricks, связанный с записью об использовании. К ним относятся следующие значения:

• JOBS
• DLT
• SQL
• ALL_PURPOSE
• MODEL_SERVING
• INTERACTIVE
• DEFAULT_STORAGE
• VECTOR_SEARCH
• LAKEHOUSE_MONITORING
• PREDICTIVE_OPTIMIZATION
• ONLINE_TABLES
• FOUNDATION_MODEL_TRAINING
• AGENT_EVALUATION
• FINE_GRAINED_ACCESS_CONTROL

• NETWORKING. Затраты, связанные с подключением бессерверных вычислений к ресурсам через частные конечные точки. Для использования NETWORKING, workspace_id — это null, usage_unit — это hour, а networking.connectivity_type — это PRIVATE_IP.
• APPS: затраты, связанные с созданием и запуском приложений Databricks

Справочник по функциям продукта

Столбец product_features — это объект, содержащий сведения о конкретных возможностях продукта, используемых и включающий следующие пары "ключ-значение".

• jobs_tier: значения включают LIGHT, CLASSICили null
• sql_tier: значения включают CLASSIC, PROили null
• dlt_tier: значения включают CORE, PRO, ADVANCEDили null
• is_serverless: значения включают true или falseили null
• is_photon: значения включают true или falseили null
• serving_type: значения включают MODEL, GPU_MODEL, FOUNDATION_MODEL, FEATUREили null
• offering_type: значения включают BATCH_INFERENCE или null.

• networking.connectivity_type: значения включают PUBLIC_IP и PRIVATE_IP