Ноябрь 2022 г.

Эти функции и улучшения платформы Azure Databricks были выпущены в ноябре 2022 года.

Расширенные уведомления для заданий Azure Databricks (общедоступная предварительная версия)

30 ноября - 7 декабря 2022 г.

Теперь вы можете отправлять уведомления о важных событиях выполнения заданий с использованием веб-перехватчиков или встроенных уведомлений Slack. Эта функция добавляет поддержку существующего уведомления электронной почты для событий выполнения задания. Для получения дополнительной информации см. раздел Добавление уведомлений назадаче.

Databricks Runtime 12.0 (бета-версия)

28 ноября 2022 г.

Databricks Runtime 12.0 теперь доступен в качестве бета-версии.

См. Databricks Runtime 12.0 (EoS) и Databricks Runtime 12.0 для Машинное обучение (EoS).

Настройка брандмауэров хранилища Azure для предоставления доступа из бессерверных хранилищ SQL

17 ноября 2022 г.

Теперь вы можете настроить брандмауэры для хранилища Azure, чтобы разрешить доступ из бессерверных SQL-хранилищ.

Теперь пользовательский интерфейс отправки данных можно отключить с помощью параметров администратора

17 ноября 2022 г.

Настройка администратора рабочей области для отключения пользовательского интерфейса отправки данных теперь применяется как к новому пользовательскому интерфейсу отправки данных, так и к устаревшему пользовательскому интерфейсу отправки файлов DBFS. Этот параметр применяется к персоналиям Data Science & Engineering, Databricks Mosaic AI и Databricks SQL.

Поддержка Partner Connect для каталога Unity стала общедоступной.

14 ноября 2022 г.

Теперь вы можете подключить решения партнеров к данным, управляемым каталогом Unity, с помощью Partner Connect. Список поддерживаемых партнеров см. в разделе партнеры Azure Databricks Partner Connect.

Работа с большими репозиториями с разреженной проверкой

14 ноября 2022 г.

Функция поддержки разреженной выборки в Repos позволяет клонировать и работать с частью каталогов удаленного репозитория в Azure Databricks. Это полезно, если вы работаете с monorepo или размер репозитория выходит за пределы поддерживаемых Databricks.

Дополнительные сведения см. в разделе Настройка режима разреженной выборки в Repos.

Поставщик Databricks Terraform обновлен до версии 1.6.5

11 ноября 2022 г.

Версия 1.6.5 добавляет query_plan параметр в databricks_sql_visualization ресурс, использует новый name фильтр для поиска заданий по имени в источнике данных и многое другое databricks_job . Дополнительные сведения см. в журналах изменений для версии 1.6.5.

Создание бессерверных хранилищ SQL в регионе "Западная часть США"

10 ноября 2022 г.

Бессерверные хранилища SQL теперь доступны в регионе "Западная часть США". См. раздел "Настройка бессерверных хранилищ SQL".

Поставщик Databricks Terraform обновлен до версий 1.6.3 и 1.6.4

7-9 ноября 2022 г.

Версии 1.6.3 и 1.6.4 добавляют параметр warehouse_type в ресурс databricks_sql_endpoint для поддержки дополнительных типов складов данных Databricks SQL. Дополнительные сведения см. в журналах изменений для версий 1.6.3 и 1.6.4.

Укажите расположение облачного хранилища для управляемых таблиц каталога Unity на уровнях каталога и схем.

18 ноября 2022 г.

Каталог Unity теперь позволяет указать расположение облачного хранилища для управляемых таблиц на уровнях каталога и схем с помощью обозревателя каталогов. Вы сможете сделать то же самое с помощью инструкций SQL в ближайшее время. См. статью Создание каталогов и создание схем.

Доступ к недавним объектам из поля поиска в верхней строке рабочей области

8-14 ноября 2022 г.

Щелкнув поле Search в верхней строке рабочей области Azure Databricks, последние файлы, записные книжки, запросы, оповещения и панели мониторинга теперь перечислены в разделе Recents, отсортированные по последней дате открытия. Последние объекты в списке фильтруются в соответствии с критериями поиска. Дополнительные сведения см. на странице результатов поиска.

Создание или изменение таблицы на странице отправки файлов теперь поддерживает несколько файлов

8 ноября 2022 г.

Теперь вы можете использовать страницу Создание или изменение таблицы из загруженных файлов для одновременной загрузки до 10 файлов в таблицу Delta. См. статью Создание или изменение таблицы посредством загрузки файла.

Создание или изменение таблицы на странице отправки файлов теперь поддерживает перезапись

8 ноября 2022 г.

Теперь можно использовать страницу Создать или изменить таблицу из загрузки файла для создания или перезаписи управляемых таблиц Delta. См. статью Создание или изменение таблицы посредством загрузки файла.

Поиск заданий по имени с помощью API заданий 2.1

3 ноября 2022 г.

Теперь можно фильтровать по имени задания с помощью перечисления всех заданий операции (GET /jobs/list) в API заданий.

Поставщик Databricks Terraform обновлен до версии 1.6.2

2 ноября 2022 г.

Версия 1.6.2 добавляет runtime_engine в ресурс databricks_cluster, валидацию для path в ресурсе databricks_repo, автоматическое обнаружение URL-адресов AWS CodeCommit в ресурсе databricks_repo и многое другое. Подробности см. в журнале изменений.

Поиск таблиц в каталоге Unity перешел в общую доступность.

1 ноября 2022 г.

Теперь можно найти таблицы, зарегистрированные в каталоге Unity, с помощью диалогового окна поиска, расположенного в верхней части каждой страницы в пользовательском интерфейсе рабочей области Azure Databricks. Вы можете выполнять поиск по именам таблиц, примечаниям к таблицам, именам столбцов и примечаниям к столбцам. Только таблицы, которые вы имеете право видеть, отображаются в результатах поиска. В обозревателе каталогов больше нет отдельной функции поиска таблиц.

Дополнительные сведения см. в разделе "Поиск объектов рабочей области".