Настройка кластера больших данных SQL Server

Область применения: SQL Server 2019 (15.x)

Important

Кластеры больших данных Microsoft SQL Server 2019 прекращены. Поддержка кластеров больших данных SQL Server 2019 закончилась с 28 февраля 2025 г. Дополнительные сведения см. в записи блога объявлений и параметрах больших данных на платформе Microsoft SQL Server.

Управление конфигурацией позволяет администраторам гарантировать, что кластер больших данных всегда готов к потребностям рабочей нагрузки. С помощью этой функции администраторы кластера могут изменять или настраивать различные части кластера больших данных во время развертывания или после развертывания и получить более подробную информацию о конфигурациях, выполняемых в кластере больших данных.

Управление конфигурацией позволяет администратору включить агент SQL, определить базовые ресурсы для заданий Spark своей организации или даже узнать, какие параметры настраиваются в каждой области. Во время развертывания конфигурации можно настроить с помощью файла развертывания bdc.json и после развертывания с помощью azdata CLI.

Configuration Scopes

Конфигурация кластеров больших данных имеет три уровня области: clusterи serviceresource. Иерархия параметров следует в этом порядке, а также от самого высокого до нижнего. Компоненты BDC будут принимать значение параметра, определенного в самой низкой области. Если параметр не определен в заданной области, он наследует значение от его более высокой родительской области.

Например, может потребоваться определить число ядер по умолчанию, которое драйвер Spark будет использовать в пуле носителей и Sparkhead ресурсах. Чтобы определить число ядер по умолчанию, можно выполнить одно из следующих действий:

  • Указание значения ядер по умолчанию в Spark области службы

  • Указание значения ядер по умолчанию в storage-0 области ресурсов и sparkhead области ресурсов

В первом сценарии все ресурсы службы Spark (пул носителей и Sparkhead) наследуют число ядер по умолчанию из значения службы Spark по умолчанию.

Во втором сценарии каждый ресурс будет использовать значение, определенное в соответствующей области.

Если число ядер по умолчанию настроено как в службе, так и в области ресурсов, то значение области ресурсов переопределит значение области службы, так как это самая низкая настраиваемая пользователем область для заданного параметра.

Next steps

Дополнительные сведения о конфигурации см. в следующих статьях:

Reference:

  • Last updated on