План управления затратами для пакетная служба Azure

В этой статье описывается, как планировать и управлять затратами для службы пакетной обработки Azure. Перед развертыванием службы можно использовать калькулятор цен Azure для оценки затрат на пакетная служба Azure. Позже при развертывании ресурсов Azure просмотрите предполагаемые затраты.

После того как вы начнете выполнять задания, используйте функции управления затратами, чтобы задать бюджеты и отслеживать затраты. Вы также можете просмотреть прогнозируемые затраты и определить тенденции расходов, чтобы определить области, в которых может потребоваться действовать. Затраты на пакетная служба Azure являются лишь частью ежемесячных расходов в счете Azure. Хотя в этой статье объясняется, как планировать затраты на пакетная служба Azure и управлять ими, вы оплачиваете все службы и ресурсы Azure, используемые в подписке Azure, включая сторонние службы.

Предварительные условия

Анализ затрат в службе управления затратами поддерживает большинство типов учетных записей Azure, но не все. Полный список поддерживаемых типов учетных записей см. в статье Understand Cost Management data (Интерпретация данных службы "Управление затратами"). Чтобы просмотреть данные о затратах, для учетной записи Azure нужен как минимум доступ на чтение. Сведения о назначении доступа к данным Управление затратами Microsoft см. в разделе "Назначение доступа к данным".

Оценка затрат перед использованием пакетная служба Azure

Используйте калькулятор цен Azure, чтобы оценить затраты перед добавлением виртуальных машин.

1. На вкладке Продукты перейдите в раздел Вычисления или найдите Batch в строке поиска. На плитке Batch нажмите Добавить к оценке и прокрутите вниз до раздела ваша оценка.

2. Обратите внимание, что служба пакетная служба Azure является бесплатной, а затраты связаны с базовыми ресурсами, которые выполняют ваши рабочие нагрузки. При добавлении пакетная служба Azure в оценку, калькулятор цен автоматически создает выбор для Облачных служб и Виртуальных машин. Дополнительные сведения об Azure Облачных службах и Azure Виртуальных машинах смотрите в документации для каждого продукта. Что вам нужно знать для оценки стоимости службы пакетная служба Azure, так это то, что виртуальные машины являются самым важным ресурсом.

   Выберите параметры из раскрывающихся списков. Доступны различные варианты выбора. Параметры, которые влияют на общую оценку, являются операционной системой вашей виртуальной машины, лицензией операционной системы, если это применимо, размер виртуальной машины, выбранный в разделе INSTANCE, количество выбранных экземпляров и время выполнения экземпляров.

   Обратите внимание, что общая оценка изменяется при выборе различных параметров. Оценка отображается в верхнем и нижнем углах раздела "Оценка".

   

   Дополнительные сведения о затратах на запуск виртуальных машин см. в плане управления затратами на виртуальные машины.

Изучите полную модель выставления счетов для пакетная служба Azure

пакетная служба Azure работает на инфраструктуре Azure, которая вызывает расходы при развертывании новых ресурсов. Важно понимать, что могут возникнуть и другие расходы на инфраструктуру.

Как осуществляется взимание платы за пакетная служба Azure

Пакетная служба Azure является бесплатной. Затраты на использование Batch отсутствуют. Однако может взиматься оплата за базовые компьютерные ресурсы и лицензии программного обеспечения, используемые для выполнения пакетных рабочих нагрузок. Затраты могут быть вызваны виртуальными машинами в пуле, передаче данных с виртуальной машины или любых входных или выходных данных, хранящихся в облаке.

Затраты, которые могут возникнуть при использовании пакетная служба Azure.

Хотя Batch сам по себе является бесплатной службой, многие из ресурсов, которые поддерживают ваши рабочие нагрузки, не являются бесплатными. Например:

• Виртуальные машины
  • Дополнительные сведения о затратах, связанных с виртуальными машинами, см. в разделе "Как взимается плата за виртуальные машины" плана для управления затратами на виртуальные машины.
  • Каждая виртуальная машина в пуле, созданном с помощью конфигурации виртуальной машины, имеет связанный диск ОС на управляемых дисках Azure. Управляемые диски Azure имеют дополнительные затраты, а другие уровни производительности дисков также имеют разные затраты.
• Storage
  • При развертывании приложений на виртуальных машинах пакетного узла с помощью пакетов приложений вам выставляется счет за ресурсы служба хранилища Azure, которые используют эти пакеты приложений. Кроме того, взимается плата за хранение всех файлов с входными или выходными данными, например файлов ресурсов и данных журналов.
  • Как правило, стоимость хранения данных, связанных с пакетной обработкой, значительно ниже, чем стоимость вычислительных ресурсов.
• В некоторых случаях балансировщик нагрузки
• Сетевые ресурсы
  • Для пулов конфигурации виртуальных машин используются стандартные подсистемы балансировки нагрузки, для которых требуются статические IP-адреса. Подсистемы балансировки нагрузки, используемые пакетной службой, видимы для учетных записей, настроенных в режиме пользовательской подписки, но не в режиме пакетной службы.
  • Стандартные балансировщики нагрузки взимают плату за передачу всех данных в виртуальные машины пула Batch и из них. Выберите API пакетной обработки, которые извлекают данные из узлов пула (такие как получение файлов задачи или узлов), пакеты приложений для задач, ресурсы и выходные файлы, а также образы контейнеров, также могут привести к расходам.
  • Виртуальная сеть
• В зависимости от того, какие службы вы используете, ваше решение Batch может подразумевать дополнительные расходы. Службы, которые обычно используются с Batch и могут иметь связанные затраты, включают:
  • Application Insights
  • Фабрика данных
  • Azure Monitor

Затраты могут начисляться после удаления ресурсов.

После удаления ресурсов пакетная служба Azure следующие ресурсы могут продолжать существовать. Затраты продолжают начисляться, пока вы их не удалите.

• Виртуальная машина
• Диски, развернутые помимо ОС и локальных дисков
  • По умолчанию диск ОС удаляется вместе с виртуальной машиной, но можно задать, чтобы этого не происходило во время создания виртуальной машины.
• Виртуальная сеть
  • Виртуальный сетевой адаптер и общедоступный IP-адрес, если это применимо, можно задать для удаления вместе с виртуальной машиной.
• Пропускная способность
• Подсистема балансировки нагрузки

Для виртуальных сетей взимается плата за одну виртуальную сеть по каждой подписке и региону. Виртуальные сети не могут охватывать несколько регионов или подписок. Плата также может начисляться за настроенные частные конечные точки в конфигурациях виртуальной сети.

Пропускная способность взимается по использованию; чем больше передаваемых данных, тем больше взимается плата.

Использование предварительной оплаты Azure с пакетная служба Azure

Хотя пакетная служба Azure является бесплатной службой, вы можете оплатить базовые расходы на ресурсы с помощью кредита на предоплату Azure. Однако нельзя использовать кредит на предоплату Azure для оплаты продуктов и услуг сторонних производителей, включая услуги из Azure Marketplace.

Просмотр анализа затрат и создание бюджетов

При использовании ресурсов Azure с пакетная служба Azure вы несете расходы. Затраты на единицу использования ресурсов Azure зависят от интервалов времени (в секундах, минутах, часах и днях) или по единицам использования (байтам, мегабайтам и т. д.). Как только начнется использование ресурсов Azure, затраты будут взиматься, и вы можете увидеть затраты на анализ затрат. Управление затратами Майкрософт позволяет планировать, анализировать и уменьшать расходы, чтобы максимально увеличить объем инвестиций в облако. Вы можете просматривать и фильтровать затраты на пакеты, прогнозировать будущие затраты и устанавливать лимиты расходов с оповещениями при достижении этих лимитов.

В портале Azure вы можете создавать бюджеты и оповещения о расходах для пулов Batch или учетных записей Batch. Бюджеты и оповещения полезны для уведомления заинтересованных лиц о любых рисках, связанных с перерасходом средств. Тем не менее следует учитывать возможность задержки в оповещениях о расходах и, следовательно, незначительное превышение бюджета.

На следующем скриншоте показан пример представления Анализ затрат для подписки, отфильтрован, чтобы показывать только накопленные затраты, связанные со всеми учетными записями Batch. На нижних диаграммах показано, как общие затраты за выбранный период можно классифицировать по потребленным услугам, местоположению и счетчику. Хотя это всего лишь пример и не предназначен для отражения затрат, которые могут быть для ваших подписок, типично, что самая большая стоимость связана с виртуальными машинами, выделенными для узлов пула Batch.

Можно получить дополнительный уровень детализации анализа затрат, указав фильтр Ресурс. Для учетных записей Пакетной службы эти значения представляют собой имя учетной записи Пакетной службы и имя пула. Это позволяет просматривать затраты для определенного пула, нескольких пулов или одной или нескольких учетных записей.

Просмотр анализа затрат для пула Batch-системы

Режим распределения пула "Пакетная служба"

Для учетных записей пакетной службы, созданных с помощью режима выделения пула пакетной службы:

1. На портале Azure перейдите к разделу Управление затратами + выставление счетов или введите название этого раздела в строке поиска.
2. Выберите свою подписку в разделе Области выставления счетов.
3. В Управление затратами выберите Анализ затрат.
4. Выберите Добавить фильтр. В первом раскрывающемся списке выберите Ресурс.
5. Во втором раскрывающемся списке выберите пул задач. При выборе пула вы увидите анализ затрат на использование вашего пула. На следующем снимке экрана показан пример данных.

После проведения анализа затрат отображается стоимость пула и список ресурсов, влияющих на эту стоимость. В данном примере виртуальные машины, используемые в пуле, являются наиболее дорогостоящим ресурсом.

Теги можно ассоциировать с учетными записями Batch, что позволяет использовать теги для дополнительной фильтрации затрат. Например, теги можно использовать для сопоставления сведений о проекте, пользователе или группе с учетной записью Batch. Теги в настоящее время не могут быть присвоены пулам Batch.

Режим распределения пула пользовательских подписок

Для учетных записей Batch, созданных в режиме распределения подписок пользователей:

1. На портале Azure перейдите к разделу Управление затратами + выставление счетов или введите название этого раздела в строке поиска.
2. Выберите свою подписку в разделе Области выставления счетов.
3. В Управление затратами выберите Анализ затрат.
4. Выберите Добавить фильтр. В первом раскрывающемся списке выберите Тег.
5. Во втором раскрывающемся списке выберите poolname.
6. В третьем раскрывающемся списке выберите пул Batch. При выборе пула вы увидите анализ затрат на использование вашего пула. На следующем снимке экрана показан пример данных.

Обратите внимание, что если вы заинтересованы в просмотре данных о затратах для всех пулов в пользовательской учетной записи Batch, вы можете выбрать batchaccountname во втором раскрывающемся списке и имя вашей учетной записи Batch в третьем раскрывающемся списке.

Создайте бюджет для пула для пакетной обработки.

Можно создавать бюджеты и выдавать предупреждения о расходах при достижении различных процентов бюджета, например, 60 %, 80 % и 100 %. В бюджетах можно указать один или несколько фильтров, чтобы вы могли отслеживать расходы по учетной записи Batch и оповещать о них при разной степени детализации.

1. На странице Анализ затрат выберите Budget: none (Бюджет: нет).
2. Выберите Create new budget (Создать бюджет) >.
3. В открывшимся окне настройте параметры бюджета для своего пула. Дополнительные сведения см. в статье Руководство по созданию бюджетов Azure и управлении ими.

Минимизируйте затраты, связанные с пакетная служба Azure

В зависимости от вашего сценария, возможно, вам потребуется максимально уменьшить расходы. Рассмотрите возможность использования одной или нескольких из приведенных стратегий, которые помогут повысить эффективность рабочих нагрузок и снизить потенциальные затраты.

Уменьшить использование узлов пула

Наибольшие затраты, связанные с использованием Batch, обычно относятся к виртуальным машинам, предназначенным для узлов пула. Для пулов конфигурации виртуальных машин связанные управляемые диски, используемые для дисков ОС виртуальных машин, также могут значительно увеличивать затраты.

Оцените приложение Batch, чтобы определить, эффективно ли узлы пула используются задачами обработки заданий или простаивают дольше ожидаемого времени. Можно сократить количество выделенных узлов пула, уменьшить скорость увеличения масштаба узлов пула или увеличить скорость уменьшения масштаба для повышения использования.

Помимо пользовательского мониторинга метрики пакетной обработки могут помочь определить узлы, которые выделены, но находятся в простое. Вы можете выбрать метрику для просмотра большинства состояний узлов пула через метрики мониторинга Batch на портале Azure. Например, можно просмотреть "Число простаивающих узлов" и "Число работающих узлов", чтобы дать представление о том, насколько эффективно используются узлы пула.

Убедитесь, что узлы пула могут выполнять задачи

Выделенные узлы, назначенные для пула, обычно влекут расходы, но узлы пула могут находиться в состоянии, при котором не удается выполнять задачи, такие как "недоступные" или "starttaskfailed". Пакетные API или метрики можно использовать для мониторинга и обнаружения этой категории виртуальных машин. После этого можно определить причину этих состояний и принять корректирующие меры для сокращения или устранения этих неработоспособных узлов.

Использование правильного размера виртуальной машины узла пула

Убедитесь, что используется соответствующий размер виртуальной машины, чтобы виртуальные машины эффективно использовались при выполнении задач, обеспечивая при этом производительность, необходимую для выполнения рабочих задач в требуемое время. Виртуальные машины узла пула могут недостаточно использоваться в некоторых ситуациях, например, при низкой загрузке ЦП. Затраты можно сократить, выбрав размер виртуальной машины по более низкой цене.

Чтобы определить использование виртуальных машин, можно войти на узел при выполнении задач для просмотра данных о производительности или использовать возможности мониторинга, такие как Application Insights, для получения данных о производительности с узлов пула.

Используйте слоты пула, чтобы снизить требования к узлам

Для пула можно указать несколько слотов задач, чтобы соответствующее количество задач выполнялось параллельно на каждом узле. Слоты задач пула можно использовать для уменьшения количества узлов, используемых в пуле, путем выбора больших размеров виртуальных машин и параллельного запуска нескольких задач на узле, чтобы обеспечить эффективное использование узла. Если узлы недостаточно загружены, можно использовать слоты для увеличения загрузки. Например, для однопоточного приложения задач можно настроить один слот на ядро. Кроме того, можно иметь больше слотов, чем ядер. Это применимо, если приложение значительно блокирует ожидание возврата вызовов внешних служб, например.

Настройка taskSchedulingPolicy на pack помогает обеспечить максимально возможное использование виртуальных машин, с более простой возможностью масштабирования для удаления узлов, которые не выполняют никаких задач.

Использование виртуальных машин Azure Spot

При использовании виртуальных машин Spot Azure снижаются затраты на пакетные рабочие нагрузки за счет задействования избыточных вычислительных ресурсов Azure. Если в пулах вы указали виртуальные машины Spot, служба Batch использует этот избыточный ресурс для выполнения вашей рабочей нагрузки. При использовании Spot ВМ вместо выделенных виртуальных машин, вы можете значительно снизить затраты. Имейте в виду, что виртуальные машины Spot подходят не для всех рабочих нагрузок, так как может не быть доступных ресурсов для выделения, или они могут быть принудительно остановлены.

Используйте временные ОС-диски

По умолчанию узлы пула используют управляемые диски, что приводит к затратам. Пулы конфигураций виртуальных машин для некоторых размеров VM могут использовать временные диски ОС, которые создают диск ОС в кэше виртуальной машины или временном SSD, чтобы избежать дополнительных затрат, связанных с управляемыми дисками.

Приобретение резервирований для экземпляров виртуальных машин

Если вы планируете использовать Batch в течение длительного периода времени, расходы на виртуальные машины можно уменьшить, используя для рабочих нагрузок Azure Reservations. Тарифы резервирования значительно ниже, чем тарифы при оплате по мере использования. Экземпляры виртуальных машин, используемые без резервирования, оплачиваются по тарифу 'оплата по факту использования'. При покупке бронирования применяется скидка на него. При заключении договора на срок один или три года для экземпляров виртуальных машин значительные скидки применяются к использованию этих машин, включая виртуальные машины, используемые в пулах пакетной обработки.

Важно отметить, что скидка на резервирование действует по принципу "используй или потеряешь". Если в течение часа не используются соответствующие ресурсы, вы потеряете зарезервированное количество на этот час. Неиспользованные зарезервированные часы не могут быть перенесены на следующий период и, следовательно, пропадают, если не используются. При пакетных рабочих нагрузках количество выделенных виртуальных машин часто масштабируется в соответствии с нагрузкой, которая может меняться, включая периоды, когда она отсутствует. Поэтому необходимо внимательно определить объём резервирования, учитывая, что зарезервированные часы теряются, если виртуальные машины Batch уменьшаются ниже количества резервирования.

Использование автоматического масштабирования

Автоматическое масштабирование позволяет динамически изменять количество виртуальных машин в пуле пакетной службы в зависимости от потребностей текущего задания. При масштабировании пула на основе времени существования задания автоматическое масштабирование гарантирует, что виртуальные машины масштабируются и используются только при выполнении задания. По завершении задания или при отсутствии заданий виртуальные машины автоматически уменьшаются, чтобы сэкономить вычислительные ресурсы. Масштабирование позволяет снизить общую стоимость Batch решения, используя только необходимые ресурсы.

Следующие шаги

• Дополнительные сведения об управлении затратами Майкрософт и выставлении счетов.
• Узнайте об использовании точечных виртуальных машин Azure с пакетной службой.