Март 2025 г.

Эти функции и улучшения платформы Azure Databricks были выпущены в марте 2025 года.

Note

Выпуски осуществляются поэтапно. Учетная запись Azure Databricks может не обновляться до недели или более после начальной даты выпуска.

Databricks Runtime 16.3 доступен в общем доступе

31 марта 2025 г.

Databricks Runtime 16.3 и Databricks Runtime 16.3 ML теперь доступны в широком доступе.

См. Databricks Runtime 16.3 (EoS) и Databricks Runtime 16.3 для Машинное обучение (EoS).

Отключите ваш устаревший метахранилище Hive (Общий предварительный просмотр)

31 марта 2025 г.

Теперь вы можете отключить прямой доступ к метахранилищам Hive из вашего рабочего пространства, обеспечивая, чтобы весь доступ и управление осуществлялись с помощью Unity Catalog. См. Отключить доступ к хранилищу метаданных Hive, используемое рабочей областью Azure Databricks.

Работа в Databricks теперь позволяет выполнять 1 000 задач

31 марта 2025 г.

Одна задача в вашем рабочем процессе теперь может содержать до 1000 задач. Смотрите Задания Lakeflow.

Mosaic AI Agent Framework и Mosaic AI Agent Evaluation доступны для общего пользования (в общем доступе).

31 марта 2025 г.

Создавайте и оценивайте AI-агентов с помощью Mosaic AI Agent Framework и Mosaic AI Agent Evaluation. Agent Framework упрощает создание и развертывание высококачественных приложений ИИ. Agent Evaluation предоставляет инструменты для оценки качества, стоимости и задержки приложений ИИ, помогая вам разрабатывать точные, безопасные и контролируемые результаты. См. статью "Использование агентов" в Azure Databricks и оценке агента (MLflow 2).

Управляемые SaaS-коннекторы поддерживают выбор на уровне столбцов (только API)

28 марта 2025 г.

Управляемые коннекторы для корпоративных приложений (таких как Salesforce, Workday и ServiceNow) теперь поддерживают выбор и отмену выбора на уровне столбцов. Вы также можете указать, следует ли автоматически добавлять будущие столбцы по мере их добавления в источник. См. концепции разъёмов Lakeflow Connect.

Поддержка Meta Llama 3.3 70B в инструкциях по подстройке базовых моделей.

28 марта 2025 г.

Поддержка настройки основного модели теперь доступна для Meta Llama 3.3 70B Instruct. См. раздел "Поддерживаемые модели".

Приложения Databricks: управление доступом к ресурсам на основе разрешений пользователей с авторизацией от имени пользователя (общедоступная предварительная версия)

26 марта 2025 г.

Теперь Databricks Apps может использовать авторизацию пользователей, чтобы обеспечить взаимодействие приложений с ресурсами с помощью разрешений, назначенных пользователю приложения. Вы можете использовать авторизацию пользователя, когда доступ к ресурсам, таким как таблицы, управляемые UC, или точки обслуживания модели, должен быть ограничен разрешениями, предоставленными пользователю. См. раздел "Настройка авторизации" в приложении Databricks.

Системные схемы устаревших версий устраняются

26 марта 2025 г.

Следующие устаревшие системные схемы устарели и будут удалены из system каталога. Список текущих системных схем и таблиц см. в справочнике по системным таблицам.

  • operational_data
  • lineage
  • access_preview
  • billing_preview

Claude Sonnet 3.7 теперь поддерживается на платформе Mosaic AI Model Serving

26 марта 2025 г.

Anthropic Claude Sonnet 3.7 теперь поддерживается на платформе Mosaic AI Model Serving. Claude Sonnet 3.7 доступен с помощью:

Дополнительное ведение журнала аудита для событий Databricks Apps (общедоступная предварительная версия)

25 марта 2025 г.

Ведение журнала аудита из Databricks Apps теперь включает записи для следующих событий: createApp, installTemplateApp, updateApp, startApp, stopApp, deployApp и deleteApp. См. журналы аудита для событий приложения.

Кластеры групп обычно доступны (GA)

25 марта 2025 г.

Возможность назначать вычислительные ресурсы всех целей и заданий группе с помощью режима выделенного доступа теперь общедоступна. См. доступ к выделенной группе вычислений.

Извлечение информации находится в бета-версии

25 марта 2025 г.

В бета-версии извлечение информации поддерживает извлечение информации и упрощает процесс преобразования большого объема неназначенных текстовых документов в структурированную таблицу с извлеченными сведениями для каждого документа.

См. статью "Использование извлечения информации" (устаревшая версия).

Новое разрешение CAN VIEW доступно для хранилищ SQL (общедоступная предварительная версия)

25 марта 2025 г.

Разрешение CAN VIEW позволяет пользователям отслеживать хранилища SQL, включая связанную историю запросов и профили запросов. Эти пользователи не могут выполнять запросы в хранилище SQL без предоставления дополнительных разрешений. См. списки управления доступом хранилища SQL.

Новый обозреватель столбцов

24 марта 2025 г.

Теперь при работе с выходными данными табличной записной книжки можно использовать обозреватель столбцов. Обозреватель столбцов позволяет выполнять поиск, отображение или скрытие, закрепление и изменение порядка столбцов. См. статью "Изучение столбцов".

Шлюз искусственного интеллекта теперь поддерживает конечные точки с оплатой за токен

24 марта 2025 г.

Шлюз ИИ Мозаик теперь поддерживает интерфейсы API базовых моделей с оплатой за токен.

Теперь вы можете включить следующие функции управления и мониторинга в конечных точках с оплатой за токен:

  • Разрешение и ограничение скорости для управления доступом и количеством доступа.
  • Журналирование полезной нагрузки для отслеживания и аудита данных, отправляемых в API модели с помощью таблиц выводов.
  • отслеживание использования для мониторинга операционного использования на конечных точках и связанных затрат с помощью системных таблиц .
  • AI Guardrails для предотвращения нежелательных и небезопасных данных в запросах и ответах.

Коннектор Databricks для Google Sheets (Публичная версия для предварительного просмотра)

20 марта 2025 г.

Коннектор Databricks для Google Sheets позволяет подключаться к рабочему пространству Databricks из Google Sheets. См. Соединитель Databricks для Google Sheets.

Действие веб-терминала теперь считается вычислительным действием

20 марта 2025 г.

Вычислительные ресурсы, настроенные для автоматического завершения после периода бездействия, будут продолжать выполняться, если активность обнаружена в веб-терминале Databricks, подключенном к этим ресурсам, включая использование записной книжки. См. раздел "Автоматическое завершение".

Политики бюджета, переименованные в бессерверные политики бюджета

19 марта 2025 г.

Положения о бюджетах без сервера (публичная предварительная версия) были переименованы из положений о бюджетах. См. раздел "Использование атрибутов с бессерверными политиками".

Delta Sharing поддерживает переименование таблиц

19 марта 2025 г.

Delta Sharing теперь поддерживает переименование совместно используемых таблиц. Если поставщик переименовывает общую таблицу, таблица на стороне получателя автоматически примиряется без ошибок. См. обновление акций .

Федерация OIDC для обмена данными Databricks с открытым доступом Delta Sharing (Публичная версия)

17 марта 2025 г.

Поставщики данных в Azure Databricks теперь могут позволить получателям использовать собственный поставщик удостоверений (IdP) для установления доступа к долям Delta Sharing, созданным в Azure Databricks. Этот аутентификационный поток использует федерацию токенов Open ID Connect (OIDC) для обмена JSON веб-токенами (JWT), созданными поставщиком удостоверений получателя, на краткосрочные токены OAuth, генерируемые Azure Databricks. Этот поток аутентификации для открытия доступа Databricks предназначен для получателей, у которых нет доступа к рабочей области Databricks с включенной поддержкой Unity Catalog.

Федерация OIDC — это альтернатива использованию маркеров носителя, выданных Azure Databricks, для подключения получателей, отличных от Databricks, к поставщикам. Он обеспечивает точное управление доступом, поддерживает многофакторную проверку подлинности и снижает риски безопасности, устраняя необходимость управления и защиты общих учетных данных получателями.

Совместное использование Databricks-to-open с федерацией OIDC поддерживает U2M аутентификацию ("пользователь-к-компьютеру") для получателей на Power BI и Tableau, а также M2M аутентификацию с использованием учетных данных клиента OAuth от Python клиентских приложений, зарегистрированных в идентификационной платформе получателя.

Эта функция доступна в общедоступной предварительной версии. Обратитесь к представителю Azure Databricks, чтобы запросить доступ.

См. Включение федерации Open ID Connect (OIDC) для получателей OpenSharing.

AutoML поддерживает кластеры в выделенном режиме доступа, назначенном группам

17 марта 2025 г.

Теперь AutoML можно использовать в кластерах с выделенным доступом, когда они назначены группам. Ранее AutoML был доступен только в кластерах выделенного доступа в однопользовательском режиме. См. раздел Требования.

Таблицы вычислительной системы включены по умолчанию

17 марта 2025 г.

Схема system.compute теперь включена по умолчанию во всех рабочих областях каталога Unity. См. справочник по таблицам вычислительной системы.

Федерация хранилища метаданных Hive доступна для общего пользования.

Пятница, 14 марта 2025 г.

Федерация хранилища метаданных Hive позволяет использовать каталог Unity для доступа к данным, зарегистрированным в хранилище метаданных Hive, и управлять ими. Сюда входят как хранилища метаданных Hive, управляемые внешними, так и устаревшие внутренние хранилища метаданных Databricks Hive Hive.

GA добавляет поддержку:

  • Хранилище метаданных Hive 3.1 (помимо версий 0.13 и 2.3, поддерживаемых в общедоступной предварительной версии).
  • Postgres и SQL Server (помимо MySQL, которая была поддерживается в общедоступной предварительной версии).
  • Доступ к таблицам, основанным на корне DBFS, за брандмауэром хранилища .
  • Применение фильтров строк и маскирования на уровне столбцов к таблицам Hive, к которым осуществляется доступ через федерацию хранилища метаданных Hive.

Кроме того, этот выпуск включает поддержку предварительной версии для:

  • Чтение мелких клонов Delta, определенных в хранилище метаданных Hive (общедоступная предварительная версия).
  • Чтение таблиц с поддержкой DBFS в рабочих областях (частная предварительная версия): обратитесь к представителю учетной записи Azure Databricks для регистрации.

См. федерацию хранилища метаданных Hive: включите каталог Unity для управления таблицами, зарегистрированными в хранилище метаданных Hive.

Теперь журналы вычислений можно сохранять на томах (общедоступная предварительная версия)

13 марта 2025 г.

Теперь вы можете доставлять журналы драйвера, исполнителя и событий вычислительных ресурсов в томе каталога Unity. См. доставку журналов вычислений.

Выгрузка в формате Excel теперь доступна в записных книжках, подключенных к бессерверным вычислениям

13 марта 2025 г.

Для ноутбуков, подключенных к бессерверным вычислениям, теперь можно скачать табличные результаты в виде файла Excel. Скачивание как Excel также поддерживается для записных книжек, подключенных к хранилищам SQL. См. результаты загрузки.

Привязка учетных данных хранилища, параметров доступа к службам и внешних местоположений к конкретным рабочим областям (GA)

12 марта 2025 г.

Теперь возможность связывания учетных данных хранилища, учетных данных службы и внешних расположений с определенными рабочими областями общедоступна. Привязка рабочей области запрещает доступ к этим объектам из других рабочих областей. Эта функция особенно полезна при использовании рабочих областей для изоляции доступа к данным пользователей, например при наличии отдельных рабочих областей и рабочих областей разработки или выделенной рабочей области для обработки конфиденциальных данных.

Дополнительные сведения см. в разделах Назначение внешнего расположения определенным рабочим областям, Назначение учетных данных хранилища определенным рабочим областям и (Необязательно) Назначение учетных данных службы определенным рабочим областям.

Databricks Runtime 16.3 (бета-версия)

12 марта 2025 г.

Databricks Runtime 16.3 и Databricks Runtime 16.3 ML теперь доступны в качестве бета-выпусков.

См. Databricks Runtime 16.3 (EoS) и Databricks Runtime 16.3 для Машинное обучение (EoS).

Новый открытый код Databricks JDBC Driver: общая доступность

11 марта 2025 г.

Новый Databricks JDBC Driver теперь общедоступен (GA) и скоро будет открытый код. Скачайте новый драйвер JDBC Databricks версии 3 из репозитория Maven.

Мониторинг и отзыв личных маркеров доступа в учетной записи (общедоступная предварительная версия)

11 марта 2025 г.

Отчет токена теперь доступен в публичной предварительной версии. Отчет токенов позволяет администраторам учетных записей отслеживать и отзывать личные токены доступа (PATs) в панели управления учетной записью. Databricks рекомендует использовать маркеры доступа OAuth вместо PATS для повышения безопасности и удобства. См. мониторинг и отзыв персональных токенов доступа в учетной записи.

API бесед Genie теперь находится в общедоступной предварительной версии

11 марта 2025 г.

API Genie для бесед теперь находится в общедоступной предварительной версии. Теперь вы можете задать вопросы, получить созданные результаты SQL и запроса или получить сведения, связанные с пространством Genie с помощью REST API Databricks. Чтобы узнать, как использовать API, см. справочник по Genie REST API.

Чтобы узнать, как создать мультиагентную систему с помощью фреймворка агентной системы Mosaic AI, см. Использование Genie в мультиагентных системах (обслуживание моделей).

Выполнение пакетного вывода с помощью функций ИИ (общедоступная предварительная версия)

10 марта 2025 г.

Mosaic AI теперь поддерживает пакетное предсказание с использованием функций ИИ. Эта функция доступна в общедоступной предварительной версии. Дополнительные сведения см. в следующих руководствах.

Соединитель ServiceNow (общедоступная предварительная версия)

10 марта 2025 г.

Теперь вы можете получать данные из ServiceNow с помощью Databricks Lakeflow Connect. См. Настройка ServiceNow для интеграции с Azure Databricks. Чтобы принять участие в предварительном ознакомлении, обратитесь к вашей команде по работе с клиентами Databricks.

Внешние модели теперь поддерживают ЯЛМ, совместимые с OpenAI.

10 марта 2025 г.

Внешние модели в Службе модели ИИ Мозаики теперь поддерживают настраиваемый вариант поставщика. Этот параметр можно использовать для указания альтернативных поставщиков, которые не указаны явным образом в качестве поставщика моделей или моделей за настраиваемыми прокси-серверами, совместимыми с OpenAI API. См. поставщики моделей.

Мониторинг Agent Framework находится на этапе бета-тестирования

10 марта 2025 г.

Мониторинг Agent Framework находится в бета-версии . Теперь вы можете настроить мониторинг своих агентов, развернутых с помощью платформы агента ИИ "Мозаика" .

Платформа агента ИИ Мозаики общедоступна

7 марта 2025 г.

фреймворк агента ИИ Mosaic теперь доступен для всех. Используйте Agent Framework для создания и развертывания агентов высокого качества и промышленного уровня.

Поддержка Delta Sharing для статистики оптимизации запросов доступна в стадии общего доступа

4 марта 2025 г.

Получатели данных, получающие доступ к таблицам Delta, к которым предоставлен доступ через Delta Sharing, теперь могут воспользоваться статистикой оптимизатора для повышения производительности запросов. Поставщик данных должен включить прогнозную оптимизацию или вручную запустить команду ANALYZE в общей таблице Delta.

К улучшению производительности относятся следующие улучшения:

  • Запросы в Databricks на Databricks в пределах одного региона выполняются на 11% быстрее.

  • Межрегиональные запросы между Databricks и Databricks выполняются на 28% быстрее.

См. сведения об прогнозной оптимизации для управляемых таблиц каталога Unity и ANALYZE TABLE ... СТАТИСТИКА ВЫЧИСЛЕНИЙ.

Теперь шлюз искусственного интеллекта поддерживает резервные копии для внешних моделей

4 марта 2025 г.

Теперь вы можете включить резервные меры на конечных точках обслуживания вашей модели с помощью AI Gateway. Если запрос на внешнюю модель завершается ошибкой, можно указать, чтобы запрос перенаправлялся на другие внешние модели, обслуживаемые на этой конечной точке. См. статью "Настройка шлюза ИИ Unity" с помощью пользовательского интерфейса.

Контролируйте расположение помощника Databricks с помощью новой функции закрепления

4 марта 2025 г.

Теперь у вас есть больше контроля над размещением панели Помощника Databricks и возможностью минимизировать её с помощью новой функции закрепления.

См. параметры кода Genie.

Безопасное подключение к кластеру (без общедоступного IP-адреса) теперь по умолчанию для новых рабочих областей Azure Databricks

3 марта 2025 г.

Начиная с 3 марта 2025 г. новые рабочие области Azure Databricks по умолчанию будут использовать безопасное подключение к кластеру (без общедоступного IP-адреса), повышая безопасность, устраняя общедоступные IP-адреса на узлах кластера. Это изменение не влияет на существующие рабочие области, но миграция рекомендуется для повышения безопасности. Убедитесь, что брандмауэры разрешают исходящий трафик в плоскость управления при настройке.

  • Last updated on