Прочитать на английском

Поделиться через


Вычислительные ресурсы записной книжки

В этой статье рассматриваются параметры вычислительных ресурсов записной книжки. Записную книжку можно запустить на универсальном вычислительном ресурсе, использовать бессерверные вычисления или для команд SQL использовать хранилище SQL, тип ресурсов, оптимизированных для аналитики SQL. Дополнительные сведения о типах вычислений см. в разделе .

Бессерверные вычисления для записных книжек

Бессерверные вычислительные ресурсы позволяют быстро подключать записную книжку к вычислительным ресурсам по запросу.

Чтобы подключиться к бессерверным вычислениям, щелкните раскрывающееся меню Connect в записной книжке и выберите бессерверные.

Дополнительные сведения см. в разделе "Бессерверные вычисления" для записных книжек.

Автоматическое восстановление сеанса для безсерверных нотбуков

Прекращение работы бессерверных вычислений может привести к потере выполняющейся работы, например значений переменных Python, в записных книжках. Чтобы избежать этого, включите автоматическое восстановление сеансов для бессерверных записных книжек.

  1. Щелкните имя пользователя в правом верхнем углу рабочей области, а затем щелкните "Параметры " в раскрывающемся списке.
  2. На боковой панели "Параметры" выберите "Разработчик".
  3. В разделе «Экспериментальные функции» включите настройку автоматического восстановления сеансов для бессерверных записных книжек.

Включение этого параметра позволяет Databricks создавать моментальные снимки состояния памяти бессерверной записной книжки перед завершением простоя. При повторном подключении переменные Python записной книжки автоматически восстанавливаются из моментального снимка, позволяя беспрепятственно продолжать работу.

Эта функция имеет ограничения и не поддерживает восстановление следующих компонентов:

  • Состояние Spark
  • Дескрипторы файлов
  • Блокировки и другие примитивы параллелизма
  • Сетевые подключения

Присоедините ноутбук к вычислительному ресурсу общего назначения

Чтобы подключить записную книжку к вычислительному ресурсу общего назначения, вам потребуется РАЗРЕШЕНИЕ CAN ATTACH TO на вычислительном ресурсе.

Важно!

Если записная книжка подключена к вычислительному ресурсу, любой пользователь с разрешением CAN RUN в записной книжке имеет неявное разрешение на доступ к вычислительному ресурсу.

Чтобы подключить записную книжку к вычислительному ресурсу, щелкните селектор вычислений на панели инструментов записной книжки и выберите ресурс в раскрывающемся меню.

В меню отображается выбор всех целевых вычислительных ресурсов и хранилищ SQL, которые вы использовали недавно или в настоящее время запущены.

Присоединение записной книжки

Чтобы выбрать все доступные вычислительные ресурсы, щелкните Дополнительно.... Выберите из доступных общих вычислительных ресурсов или хранилищ SQL.

Диалоговое окно

Вы также можете создать новый универсальный вычислительный ресурс, выбрав пункт Создать новый ресурс... в раскрывающемся меню.

Важно!

В подключенной записной книжке определены следующие переменные Apache Spark.

Класс Имя переменной
SparkContext sc
SQLContext/HiveContext sqlContext
SparkSession (Spark 2.x) spark

Не создавайте SparkSession, SparkContext или SQLContext. Это приведет к несоответствующему поведению.

Использование записной книжки с хранилищем SQL

При присоединении записной книжки к хранилищу SQL можно запускать ячейки SQL и Markdown. При выполнении ячейки на любом другом языке (например, Python или R) возникает ошибка. Ячейки SQL, выполняемые в хранилище SQL, отображаются в журнале запросов хранилища SQL. Пользователь, который выполнил запрос, может просмотреть профиль запроса из записной книжки, щелкнув время в нижней части выходных данных.

Для запуска записной книжки требуется pro или бессерверное хранилище SQL. У вас должен быть доступ к рабочей области и хранилищу SQL.

Чтобы подключить записную книжку к хранилищу SQL, сделайте следующее:

  1. Щелкните селектор вычислений на панели инструментов записной книжки. В раскрывающемся меню отображаются вычислительные ресурсы, которые в настоящее время запущены или которые недавно использовались. Хранилища SQL помечаются с Метка хранилища SQLпомощью .

  2. В меню выберите хранилище SQL.

    Чтобы просмотреть все доступные хранилища SQL, выберите Больше… из раскрывающегося меню. Откроется диалоговое окно с доступными вычислительными ресурсами для записной книжки. Выберите хранилище SQL, выберите хранилище, которое вы хотите использовать, и щелкните Подключить.

    Диалоговое окно

Вы также можете выбрать хранилище SQL в качестве вычислительного ресурса для записной книжки SQL при создании рабочего процесса или запланированного задания.

Ограничения хранилища SQL

Дополнительные сведения см. в известных ограничениях Databricks Notebook.

Отключение записной книжки

Чтобы отключить записную книжку от вычислительного ресурса, щелкните селектор вычислений на панели инструментов записной книжки и наведите указатель мыши на подключенный вычислительный ресурс в списке, чтобы отобразить боковое меню. В боковом меню выберите Отсоединить.

Отключить записную книжку

Вы также можете отсоединить записные книжки от вычислительного ресурса с помощью вкладки "Записные книжки " на странице сведений о вычислении.

Совет

Azure Databricks рекомендует отсоединить неиспользуемые записные книжки от вычислительных ресурсов. Это освобождает память драйвера.


Дополнительные ресурсы

Обучение

Модуль

Работа с целевыми объектами вычислений в Машинном обучении Azure - Training

Узнайте, как работать с целевыми объектами вычислений в Машинном обучении Azure. Целевые объекты вычислений позволяют запускать рабочие нагрузки машинного обучения. Узнайте, как и когда можно использовать вычислительный экземпляр или вычислительный кластер.

События

MCP DevDays

24 июл., 13 - 24 июл., 13

Ускорение производительности, создание будущего

Register Today