Разверните учетную запись Azure Batch и два пула с начальной задачей, использующей Terraform.

В этом кратком руководстве вы создадите учетную запись Azure Batch, учетную запись Azure Storage и два пула Batch с помощью Terraform. Пакетная служба — это облачная служба планирования заданий, которая параллелизирует и распределяет обработку больших объемов данных на многих компьютерах. Обычно он используется для задач, таких как отрисовка трехмерной графики, анализ больших наборов данных или обработка видео. В этом случае созданные ресурсы включают учетную запись пакетной службы (которая является централизованной сущностью организации для задач распределенной обработки), учетную запись хранения для обработки данных и два пула пакетной службы, которые являются группами виртуальных машин, выполняющих задачи.

Terraform поддерживает определение, предварительный просмотр и развертывание облачной инфраструктуры. С помощью Terraform можно создавать файлы конфигурации с применением синтаксиса HCL. Синтаксис HCL позволяет указать поставщика облачных служб, например Azure, и элементы, составляющие облачную инфраструктуру. После создания файлов конфигурации создается план выполнения, который позволяет предварительно просматривать изменения инфраструктуры до их развертывания. После проверки изменений примените план выполнения для развертывания инфраструктуры.

Предварительные условия

• Создайте учетную запись Azure с активной подпиской. Вы можете создать учетную запись бесплатно.
• Установите и настройте Terraform.

Реализация кода Terraform

1. Создайте каталог, в котором необходимо протестировать и запустить пример кода Terraform и сделать его текущим каталогом.

2. Создайте файл с именем main.tfи вставьте следующий код:

   resource "random_pet" "rg_name" {
     prefix = var.resource_group_name_prefix
   }
   
   resource "azurerm_resource_group" "rg" {
     location = var.resource_group_location
     name     = random_pet.rg_name.id
   }
   
   resource "random_string" "storage_account_name" {
     length  = 8
     lower   = true
     numeric = false
     special = false
     upper   = false
   }
   
   resource "azurerm_storage_account" "example" {
     name                     = random_string.storage_account_name.result
     resource_group_name      = azurerm_resource_group.rg.name
     location                 = azurerm_resource_group.rg.location
     account_tier             = "Standard"
     account_replication_type = "LRS"
   }
   
   resource "random_string" "batch_account_name" {
     length  = 8
     lower   = true
     numeric = false
     special = false
     upper   = false
   }
   
   resource "azurerm_batch_account" "example" {
     name                                = random_string.batch_account_name.result
     resource_group_name                 = azurerm_resource_group.rg.name
     location                            = azurerm_resource_group.rg.location
     storage_account_id                  = azurerm_storage_account.example.id
     storage_account_authentication_mode = "StorageKeys"
   }
   
   resource "random_pet" "azurerm_batch_pool_name" {
     prefix = "pool"
   }
   
   resource "azurerm_batch_pool" "fixed" {
     name                = "${random_pet.azurerm_batch_pool_name.id}-fixed-pool"
     resource_group_name = azurerm_resource_group.rg.name
     account_name        = azurerm_batch_account.example.name
     display_name        = "Fixed Scale Pool"
     vm_size             = "Standard_D4_v3"
     node_agent_sku_id   = "batch.node.ubuntu 22.04"
   
     fixed_scale {
       target_dedicated_nodes = 2
       resize_timeout         = "PT15M"
     }
   
     storage_image_reference {
       publisher = "Canonical"
       offer     = "0001-com-ubuntu-server-jammy"
       sku       = "22_04-lts"
       version   = "latest"
     }
   
     start_task {
       command_line       = "echo 'Hello World from $env'"
       task_retry_maximum = 1
       wait_for_success   = true
   
       common_environment_properties = {
         env = "TEST"
       }
   
       user_identity {
         auto_user {
           elevation_level = "NonAdmin"
           scope           = "Task"
         }
       }
     }
   
     metadata = {
       "tagName" = "Example tag"
     }
   }
   
   resource "azurerm_batch_pool" "autopool" {
     name                = "${random_pet.azurerm_batch_pool_name.id}-autoscale-pool"
     resource_group_name = azurerm_resource_group.rg.name
     account_name        = azurerm_batch_account.example.name
     display_name        = "Auto Scale Pool"
     vm_size             = "Standard_D4_v3"
     node_agent_sku_id   = "batch.node.ubuntu 22.04"
   
     auto_scale {
       evaluation_interval = "PT15M"
   
       formula = <<EOF
         startingNumberOfVMs = 1;
         maxNumberofVMs = 25;
         pendingTaskSamplePercent = $PendingTasks.GetSamplePercent(180 * TimeInterval_Second);
         pendingTaskSamples = pendingTaskSamplePercent < 70 ? startingNumberOfVMs : avg($PendingTasks.GetSample(180 * TimeInterval_Second));
         $TargetDedicatedNodes=min(maxNumberofVMs, pendingTaskSamples);
   EOF
     }
   
     storage_image_reference {
       publisher = "Canonical"
       offer     = "0001-com-ubuntu-server-jammy"
       sku       = "22_04-lts"
       version   = "latest"
     }
   }
   

3. Создайте файл с именем outputs.tfи вставьте следующий код:

   output "resource_group_name" {
     value = azurerm_resource_group.rg.name
   }
   
   output "storage_account_name" {
     value = azurerm_storage_account.example.name
   }
   
   output "batch_account_name" {
     value = azurerm_batch_account.example.name
   }
   
   output "batch_pool_fixed_name" {
     value = azurerm_batch_pool.fixed.name
   }
   
   output "batch_pool_autopool_name" {
     value = azurerm_batch_pool.autopool.name
   }
   

4. Создайте файл с именем providers.tfи вставьте следующий код:

   terraform {
     required_version = ">=1.0"
   
     required_providers {
       azurerm = {
         source  = "hashicorp/azurerm"
         version = "~>3.0"
       }
       random = {
         source  = "hashicorp/random"
         version = "~>3.0"
       }
     }
   }
   
   provider "azurerm" {
     features {}
   }
   

5. Создайте файл с именем variables.tfи вставьте следующий код:

   variable "resource_group_location" {
     type        = string
     default     = "eastus"
     description = "Location of the resource group."
   }
   
   variable "resource_group_name_prefix" {
     type        = string
     default     = "rg"
     description = "Prefix of the resource group name that's combined with a random ID so name is unique in your Azure subscription."
   }
   

Инициализация Terraform

Запустите terraform init, чтобы инициализировать развертывание Terraform. Эта команда загружает поставщик Azure, необходимый для управления вашими ресурсами Azure.

terraform init -upgrade

Основные моменты:

• Параметр -upgrade обновляет необходимые подключаемые модули поставщика до последней версии, которая соответствует ограничениям версии конфигурации.

Создание плана выполнения Terraform

Чтобы создать план выполнения, выполните terraform plan.

terraform plan -out main.tfplan

Основные моменты:

• Команда terraform plan создает план выполнения, но не выполняет его. Вместо этого она определяет, какие действия необходимы для создания конфигурации, заданной в файлах конфигурации. Этот шаблон позволяет проверить, соответствует ли план выполнения вашим ожиданиям, прежде чем вы начнете вносить изменения в фактические ресурсы.
• Необязательный параметр -out позволяет указать выходной файл для плана. Использование параметра -out гарантирует, что проверяемый план полностью соответствует применяемому.

Применение плана выполнения Terraform

Выполните terraform apply, чтобы применить план выполнения к вашей облачной инфраструктуре.

terraform apply main.tfplan

Основные моменты:

• Пример команды terraform apply предполагает, что вы ранее выполнили команду terraform plan -out main.tfplan.
• Если для параметра -out указано другое имя файла, используйте то же имя в вызове к terraform apply.
• Если вы не использовали параметр -out, вызовите terraform apply без параметров.

Проверка результатов

az batch account show --name <batch_account_name> --resource-group <resource_group_name>

Очистка ресурсов

Если вам больше не нужны ресурсы, созданные через Terraform, выполните следующие действия:

1. Выполните команду terraform plan и укажите флаг destroy.

   terraform plan -destroy -out main.destroy.tfplan
   

   Основные моменты:

   • Команда terraform plan создает план выполнения, но не выполняет его. Вместо этого она определяет, какие действия необходимы для создания конфигурации, заданной в файлах конфигурации. Этот шаблон позволяет проверить, соответствует ли план выполнения вашим ожиданиям, прежде чем вы начнете вносить изменения в фактические ресурсы.
   • Необязательный параметр -out позволяет указать выходной файл для плана. Использование параметра -out гарантирует, что проверяемый план полностью соответствует применяемому.

2. Выполните команду terraform apply, чтобы применить план выполнения.

   terraform apply main.destroy.tfplan
   

Устранение неполадок с Terraform в Azure

Устранение распространенных проблем при использовании Terraform в Azure.

Следующие шаги