Май 2023 г.

Эти функции и улучшения платформы Azure Databricks были выпущены в мае 2023 года.

Создание или изменение пользовательского интерфейса таблицы поддерживает отправку avro, Parquet и текстовых файлов

29 мая 2023 г.

Теперь пользовательский интерфейс создания или изменения таблицы поддерживает следующие типы файлов:

• Avro (.avro)
• Parquet (формат данных .parquet)
• Текст (TXT)

Дополнительные сведения см. в статье "Создание или изменение таблицы с помощью отправки файла".

Использование пользовательского интерфейса добавления данных для загрузки данных с помощью внешних расположений каталога Unity (общедоступная предварительная версия)

29 мая 2023 г.

Теперь можно использовать пользовательский интерфейс добавления данных для загрузки данных из пути к хранилищу облачных объектов, который определяется как внешнее расположение каталога Unity. Дополнительные сведения см. в разделе "Загрузка данных с помощью внешнего расположения каталога Unity".

Запуск записных книжек Databricks в хранилищах SQL (общедоступная предварительная версия)

31 мая 2023 г.

Теперь вы можете запускать записные книжки Databricks в хранилищах SQL. Хранилища SQL оптимизированы для аналитики SQL и обеспечивают более высокую ценовую производительность для выполнения SQL по сравнению с вычислениями всех целей. Дополнительные сведения см. в статье "Использование записной книжки с хранилищем SQL".

Запретить клавише Enter автоматически принимать предлагаемое автозаполнение

26 мая 2023 г.

Теперь можно предотвратить принятие клавишей ВВОД предложений автозаполнения в редакторе SQL. Выберите "Отключить ввод", чтобы принять автозавершение в меню kebab в редакторе SQL.

Новый регион: Китай Восточная 3

25 мая 2023 г.

Azure Databricks теперь доступен в регионе Azure Восточный Китай 3. См. регионы Azure Databricks.

Поддержка типов виртуальных машин конфиденциальных вычислений Azure (общедоступная предварительная версия)

25 мая 2023 г.

Azure Databricks теперь поддерживает использование типов виртуальных машин конфиденциальных вычислений Azure при создании кластеров. Azure конфиденциальные вычисления помогают защитить используемые данные, предотвращая доступ поставщика облачных служб к конфиденциальным данным. См. конфиденциальные вычислительные виртуальные машины Azure.

Поставщик Databricks Terraform обновлен до версии 1.17.0

22 мая 2023 г.

Поставщик Databricks Terraform 1.17.0 прекращает поддержку выпуска 32-разрядных двоичных файлов, добавляет дополнительные сведения о влиянии использования политики кластера в ресурсе databricks_cluster, и многое другое. Дополнительные сведения см. в журнале изменений для версии 1.17.0.

Интерфейс пользователя для загрузки данных поддерживает новые типы данных столбцов

19 мая 2023 г.

Пользовательский интерфейс отправки данных теперь поддерживает следующие типы данных столбцов:

• STRUCT
• ARRAY
• DECIMAL(P,S)

Дополнительные сведения см. в статье "Создание или изменение таблицы с помощью отправки файла".

Связывание каталогов Unity Catalog с конкретными рабочими областями

17 мая 2023 г.

Теперь вы можете ограничить доступ к каталогу для определенных рабочих областей в вашей учетной записи, что также называется привязкой каталогов к рабочим областям. Эта функция особенно полезна при использовании рабочих областей для изоляции доступа к данным пользователей, например при наличии отдельных рабочих областей и рабочих областей разработки или выделенной рабочей области для обработки конфиденциальных данных.

Дополнительные сведения см. в привязке рабочего пространства к каталогу.

Все пользователи могут подключаться к Fivetran с помощью Partner Connect (общедоступная предварительная версия)

17 мая 2023 г.

Роль администратора рабочей области больше не требуется для подключения к Fivetran с помощью Partner Connect. Дополнительные сведения см. в разделе "Подключение к Fivetran" с помощью Partner Connect.

Поставщик Databricks Terraform обновлен до версии 1.16.1

16 мая 2023 г.

Поставщик Databricks Terraform 1.16.1 добавляет документацию для ресурса databricks_service_principal_secret и интеграцию с Unity Catalog в ресурсе databricks_pipeline, обновляет документацию для ресурса databricks_secret_scope, и многое другое. Дополнительные сведения см. в журнале изменений версии 1.16.1.

Драйвер JDBC Databricks 2.6.33

15 мая 2023 г.

Мы выпустили версию 2.6.33 драйвера JDBC Databricks (скачать). Этот выпуск добавляет API-интерфейсы первичного ключа и внешнего ключа при подключении к серверу с включенным каталогом Unity.

Partner Connect поддерживает Alation

15-22 мая 2023 г.

Теперь вы можете подключить рабочую область Azure Databricks к Alation вручную.

Новая тема по умолчанию для редактора

12 мая 2023 г.

На основе отзывов клиентов цветовая схема по умолчанию в редакторе была обновлена для повышения удобочитаемости.

Поставщик Databricks Terraform обновлен до версии 1.16.0

12 мая 2023 г.

Поставщик Databricks Terraform 1.16.0 добавляет ресурс databricks_workspace_file, добавляет блок notification_settings к ресурсу databricks_job, и многое другое. Дополнительные сведения см. в журнале изменений версии 1.16.0.

Поддержка Unity Catalog для управляемых удостоверений Azure теперь достигла общего доступа.

11 мая 2023 г.

Возможность использовать управляемые удостоверения Azure для доступа к контейнерам хранилища от имени пользователей каталога Unity стала общедоступной. Управляемые удостоверения Azure предоставляют значительные преимущества по сравнению с служебными принципалами для этого варианта использования. См. раздел Использование управляемых удостоверений Azure в каталоге Unity для доступа к хранилищу.

Databricks Runtime 13.1 (бета-версия)

10 мая 2023 г.

Databricks Runtime 13.1 и Databricks Runtime 13.1 ML теперь доступны в качестве бета-выпусков.

См. Databricks Runtime 13.1 (EoS) и Databricks Runtime 13.1 для Машинное обучение (EoS).

Выполнение запросов SQL на основе файлов в рабочем процессе Azure Databricks

9 мая 2023 г.

Теперь при добавлении задачи SQL в задание Azure Databricks можно получить запросы SQL от поставщика Git. См. статью "Использование Git с заданиями Lakeflow".

Поставщик Databricks Terraform обновлен до версии 1.15.0

5 мая 2023 г.

Версия 1.15.0 добавляет экспериментальный databricks_sql_table ресурс, добавляет поддержку выполнения databricks_cluster сценариев init из файлов рабочей области, добавляет отсутствующие разрешения databricks_grants и многое другое. Дополнительные сведения см. в журнале изменений для версии 1.15.0.

Регионы Azure Китая теперь поддерживают каталог Unity.

5 мая 2023 г.

Восточная часть Китая 2, Северная часть Китая 2 и Северная часть Китая 3 теперь поддерживают каталог Unity.

Псевдонимы учетных записей теперь доступны в консоли учетной записи

5 мая 2023 г.

Администраторы учетных записей теперь могут задавать псевдонимы учетной записи для своих Azure Databricks учетных записей. После того, как вы дадите своей учетной записи псевдоним, имя будет отображаться в верхней части консоли учетной записи и рядом с идентификатором учетной записи. Дополнительные сведения см. в разделе "Добавление псевдонима учетной записи".

Совместное использование ноутбуков с помощью Delta Sharing

4 мая 2023 г.

Теперь вы можете использовать Delta Sharing для безопасного совместного использования файлов записных книжек с помощью схемы обмена между системами Databricks.

Совместное использование тетрадей позволяет пользователям совместно работать в метахранилищах и учетных записях, а также дает возможность поставщикам продемонстрировать примеры использования и визуализации для данных, которые они предоставляют.

См. Добавление файлов записной книжки в общую папку (для поставщиков) и Чтение общих записных книжек (для получателей).

Azure Databricks больше не создает бессерверный начальный хранилище SQL

3-12 мая 2023 г.

Azure Databricks больше не создает бессерверное начальное хранилище SQL. Сведения о создании собственного хранилища см. в статье "Создание хранилища SQL".

В API хранилищах SQL включение бессерверных вычислений теперь должно быть явным

3-12 мая 2023 г.

При создании хранилища SQL произошло незначительные изменения в API хранилищ SQL.

Для поля enable_serverless_computeранее использовалось значение по умолчанию true , если для рабочей области были включены бессерверные конечные точки SQL. Теперь по умолчанию для большинства рабочих областей используется false. Однако если эта рабочая область использовала API хранилищ SQL для создания хранилища в период с 1 ноября 2022 по 19 мая 2023 г. и соответствует требованиям для бессерверного хранилища SQL, включая его регион, значение по умолчанию остается равным true.

Чтобы избежать неоднозначности, особенно для организаций с множеством рабочих областей, Databricks настоятельно рекомендует явно задать enable_serverless_compute поле.

Изменения параметров рабочей области для бессерверных хранилищ SQL

3-12 мая 2023 г.

Для учетных записей с поддержкой бессерверных вычислений рабочие области теперь включены для бессерверных функций по умолчанию. В рамках этого изменения параметр уровня рабочей области для включения или отключения бессерверных хранилищ SQL был удален из пользовательского интерфейса параметров рабочей области.

Изменения бессерверных параметров вычислений для учетных записей и рабочих областей

3-12 мая 2023 г.

Теперь все рабочие области включены для бессерверных хранилищ SQL, если регион поддерживает его.

Azure Databricks уведомляет каждого администратора рабочей области один раз в пользовательском интерфейсе SQL Databricks для каждой рабочей области.

Для недавно включенных рабочих областей для поддержки бессерверных SQL-складов каждая рабочая область должна соответствовать требованиям и может потребовать обновления каждого брандмауэра служба хранилища Azure.

Databricks SQL Serverless — доступна в общем доступе

3-12 мая 2023 г.

Databricks SQL Serverless теперь общедоступен в поддерживаемых регионах. Бессерверные хранилища SQL обеспечивают мгновенное вычисление, минимальное управление и оптимизацию затрат для запросов SQL. Создайте бессерверные SQL хранилища или преобразуйте pro или классические SQL хранилища в бессерверные.

Обновление существующей рабочей области с безопасным подключением к кластеру или Приватный канал Azure (общедоступная предварительная версия)

3 мая 2023 г.

Вы можете включить безопасное подключение к кластеру (SCC) в существующей рабочей области , чтобы у виртуальной сети не было открытых портов и узлов кластера Databricks Runtime нет общедоступных IP-адресов. Эта функция настраивается в шаблонах Azure с помощью имени No Public IP (enableNoPublicIp).

Вы можете enable или отключить Приватный канал Azure в существующей рабочей области для частного подключения между пользователями и рабочими областями Databricks, а также между вычислительными ресурсами и уровнем управления инфраструктурой Azure Databricks.

Оба обновления требуют, чтобы рабочая область применяла внедрение виртуальной сети и ценовую категорию "Премиум".

Устаревание скриптов инициализации, охватывающих кластер в DBFS

2 мая 2023 г.

Скрипты инициализации с областью действия "кластер" в DBFS устарели. Вместо этого они должны храниться в виде файлов рабочей области. Смотрите скрипты инициализации храните в файлах рабочей области.

Унифицированная навигация (общедоступная предварительная версия)

1 мая 2023 г.

Новый унифицированный интерфейс навигации доступен в общедоступной предварительной версии. Унифицированная навигация сокращает количество щелчков и переключение контекста, необходимые для выполнения задач в разных областях продукта. Дополнительные сведения см. в разделе "Пользовательский интерфейс рабочей области".