Создание кластера с Data Lake Storage 2-го поколения с помощью портала Azure

Портал Azure — это веб-средство управления для служб и ресурсов, размещенных в облаке Microsoft Azure. Из этой статьи вы узнаете, как создавать кластеры Azure HDInsight под управлением Linux с помощью портала. Дополнительные сведения см. в статье "Создание кластеров HDInsight".

Warning

Счета за кластеры HDInsight выставляются пропорционально в минутах, независимо от их использования. Обязательно удалите кластер, когда завершите его использование. См. как удалить кластер HDInsight.

Если у вас нет подписки на Azure, создайте бесплатную учетную запись перед началом.

Чтобы создать кластер HDInsight, использующий Data Lake Storage 2-го поколения для хранения, выполните следующие действия, чтобы настроить учетную запись хранения с иерархическим пространством имен.

Создание управляемой идентичности, назначаемой пользователем

Создайте управляемое удостоверение, назначаемое пользователем, если у вас его еще нет.

  1. Войдите на портал Azure.
  2. В левом верхнем углу нажмите кнопку "Создать ресурс".
  3. В поле поиска введите назначено пользователем и щелкните Управляемое удостоверение, назначенное пользователем.
  4. Нажмите кнопку "Создать".
  5. Введите название для вашего управляемого удостоверения, затем выберите подходящую подписку, группу ресурсов и регион.
  6. Нажмите кнопку "Создать".

Для получения дополнительных сведений о том, как работают управляемые удостоверения в Azure HDInsight, см. статью Управляемые удостоверения в Azure HDInsight.

Создайте управляемое удостоверение, назначаемое пользователем.

Создание учетной записи хранения для использования с Data Lake Storage 2-го поколения

Создайте учетную запись хранения для использования с Azure Data Lake Storage 2-го поколения.

  1. Войдите на портал Azure.
  2. В левом верхнем углу нажмите кнопку "Создать ресурс".
  3. В поле поиска введите хранилище и щелкните учетную запись хранения.
  4. Нажмите кнопку "Создать".
  5. Create storage account На экране:
    1. Выберите правильную подписку и группу ресурсов.
    2. Введите имя учетной записи хранения в Data Lake Storage 2-го поколения.
    3. Щелкните вкладку "Дополнительно ".
    4. Щелкните "Включено" рядом с иерархическим пространством имен в Data Lake Storage 2-го поколения.
    5. Нажмите Просмотреть и создать.
    6. Нажмите кнопку "Создать"

Дополнительные сведения о других вариантах при создании учетной записи хранения см. в кратком руководстве по созданию учетной записи хранения для Azure Data Lake Storage 2-го поколения.

Снимок экрана: создание учетной записи хранения на портале Azure.

Настройте разрешения для управляемого удостоверения на Data Lake Storage Gen2

Назначьте управляемое удостоверение на роль владельца данных блобов хранилища в учетной записи хранения.

  1. На портале Azure перейдите к учетной записи хранения.

  2. Выберите Управление доступом (IAM).

  3. Выберите Добавить > Добавить назначение ролей.

    Снимок экрана: страница управления доступом (IAM) с открытым меню добавления назначения ролей.

  4. На вкладке Роль выберите Storage Blob Data Owner.

    Снимок экрана: страница добавления назначения ролей с выбранной вкладкой

  5. На вкладке "Участники" выберите "Управляемое удостоверение" и нажмите "Выбрать участников".

  6. Выберите подписку, выберите управляемое удостоверение, назначаемое пользователем, а затем выберите своё назначаемое пользователем удостоверение.

  7. Чтобы назначить роль, на вкладке Проверка и назначение выберите Проверка и назначение.

    Пользовательское удостоверение, которое вы выбрали, теперь отображается в выбранной роли.

    Дополнительные сведения о назначениях ролей см. в статье "Назначение ролей Azure" с помощью портала Azure

  8. После завершения этой начальной настройки можно создать кластер на портале. Кластер должен находиться в том же регионе Azure, что и учетная запись хранения. На вкладке хранилища меню создания кластера выберите следующие параметры:

    • Для основного типа хранилища выберите Azure Data Lake Storage 2-го поколения.

    • В разделе "Основная учетная запись хранения" найдите и выберите только что созданную учетную запись хранения с хранилищем Data Lake Storage 2-го поколения.

    • В разделе "Удостоверение" выберите только что созданное управляемое удостоверение, назначаемое пользователем.

      Параметры хранилища для использования Data Lake Storage 2-го поколения с Azure HDInsight.

    Note

    • Чтобы добавить дополнительную учетную запись хранения с Data Lake Storage 2-го поколения на уровне самой учетной записи, просто назначьте управляемое удостоверение, созданное ранее, тому новому хранилищу Data Lake Storage 2-го поколения, которое вы хотите добавить. Обратите внимание, что добавление дополнительной учетной записи хранения с помощью Data Lake Storage Gen2 через панель "Дополнительные учетные записи хранения" в HDInsight не поддерживается.
    • Вы можете включить RA-GRS или RA-ZRS в учетной записи хранения BLOB-объектов Azure, которую использует HDInsight. Однако создание кластера для вторичной конечной точки RA-GRS или RA-ZRS не поддерживается.
    • HDInsight не поддерживает настройку Data Lake Storage Gen2 в качестве геозонально избыточного хранилища с доступом для чтения (RA-GZRS) или геозонально избыточного хранилища (GZRS).

Удаление кластера

См. статью "Удаление кластера HDInsight" с помощью браузера, PowerShell или Azure CLI.

Troubleshoot

Если у вас возникли проблемы с созданием кластеров HDInsight, см. раздел требования к управлению доступом.

Дальнейшие шаги

Вы успешно создали кластер HDInsight. Теперь узнайте, как работать с кластером.

Кластеры Apache Spark

Кластеры Apache Hadoop

Кластеры Apache HBase

  • Last updated on