Доступ к продуктам данных в Databricks Marketplace (рабочие области с поддержкой Unity Catalog)

На этой странице описывается, как получить доступ к продуктам данных в Databricks Marketplace, если у вас есть рабочая область Azure Databricks, включенная для каталога Unity.

Обзор

Databricks Marketplace предоставляет вам, как пользователю данных, безопасную платформу для обнаружения продуктов данных, необходимых вашей организации для успешной работы. Databricks Marketplace использует OpenSharing для обеспечения безопасности и контроля над общими данными. Потребители могут получить доступ к общедоступным данным, бесплатным образцам данных и предложениям коммерческих данных. Потребители, использующие рабочую область с поддержкой каталога Unity Azure Databricks, не ограничиваются доступом к табличным данным, но также могут получить доступ к томам (не табличным данным), моделям ИИ, записным книжкам Databricks и сторонним приложениям.

При использовании продуктов данных Marketplace с помощью рабочей области Azure Databricks, которая включена для каталога Unity, вы можете воспользоваться преимуществами глубокой интеграции между OpenSharing и каталогом Unity, а также управлением каталогом Unity, аудитом и удобными интерфейсами.

Перед началом работы

Чтобы просмотреть список продуктов данных в Databricks Marketplace, можно использовать любой из следующих вариантов:

• Open Marketplace.
• Рабочая область Azure Databricks.

Чтобы использовать продукты данных с помощью рабочей области Databricks, которая поддерживает Unity Catalog, необходимо иметь следующее:

• Учетная запись в Azure Databricks на плане Premium.

• Рабочая область Azure Databricks с поддержкой Unity Catalog. См. раздел Включение рабочей области для каталога Unity.

  Если у вас нет пробной версии, вы можете получить бесплатную пробную версию. Нажмите кнопку " Попробовать бесплатно " в Open Marketplace и следуйте инструкциям, чтобы начать пробную версию.

  Внимание

  Вам не нужно включать все ваши рабочие пространства для каталога Unity. Вы можете создать новый объект и активировать его в Unity Catalog, используя это рабочее пространство для получения продуктов данных из Marketplace. Если этот параметр недоступен, используйте Marketplace на внешних платформах. См. статью "Доступ к продуктам данных" в Databricks Marketplace с помощью внешних платформ.

  Сведения о включении рабочей области для каталога Unity см. в статье "Начало работы с каталогом Unity".

• USE MARKETPLACE ASSETS привилегии на метахранилище каталога Unity, подключенное к рабочей области. См. сведения о привилегиях, которые применяются только к OpenSharing или Databricks Marketplace. Эта привилегия включена для всех пользователей во всех хранилищах метаданных каталога Unity по умолчанию.

  Если ваш администратор отключил эту привилегию, вы можете попросить его предоставить её вам или же предоставить вам одну из этих привилегий:

  • CREATE CATALOG и USE PROVIDER разрешения на хранилище метаданных каталога Unity.
  • Роль администратора хранилища метаданных.

  Если у вас нет этих привилегий, вы по-прежнему можете просматривать списки Marketplace, но не сможете получить доступ к продуктам данных с помощью каталога Unity.

  Дополнительные сведения см. в справочнике по привилегиям каталога Unity и управлении привилегиями в каталоге Unity. См. также раздел "Отключить доступ к Marketplace".

• Если вы хотите установить сервер MCP, необходимо иметь CREATE CONNECTION привилегии в хранилище метаданных каталога Unity, чтобы создать базовый объект подключения. В рабочей области также должна быть включена предварительная версия управляемых серверов MCP. См. Управление предварительными версиями Azure Databricks.

Просмотрите листинги Databricks Marketplace

Чтобы найти нужный продукт данных, просто просмотрите или найдите список продуктов данных в Databricks Marketplace.

1. Перейдите к marketplace.databricks.com или войдите в рабочую область Azure Databricks и щелкните значок Marketplace.

2. Просмотрите или найдите нужный продукт данных.

   Щелкните Значок фильтра для фильтрации списков по типу продукта (набору данных или модели машинного обучения), имени поставщика, категории, стоимости (бесплатной или платной) и т. д.

   Если вы вошли в рабочую область Azure Databricks, вы также можете просмотреть только частные списки, доступные вам в рамках частного обмена. См. статью "Участие в частных обменах".

Запрос доступа к продуктам данных в Marketplace

Чтобы запросить доступ к продуктам данных, необходимо войти в рабочую область Azure Databricks. Некоторые продукты данных доступны немедленно, а другие требуют утверждения поставщика и завершения транзакций с помощью интерфейсов поставщика.

Требования

См . статью "Перед началом работы". Чтобы получить доступ к продуктам данных в Marketplace, необходимо иметь по крайней мере USE MARKETPLACE ASSETS привилегию в хранилище метаданных каталога Unity, подключенном к используемой рабочей области.

Получение доступа к продуктам данных, которые мгновенно доступны

Некоторые продукты данных доступны мгновенно, требуя только того, чтобы вы запрашивали их и согласились с условиями. Они перечислены в разделе "Бесплатные и мгновенно доступные" на главной странице Marketplace, на плитке списка указаны как Бесплатные и обозначены как Мгновенно доступные на странице сведений о списке.

1. Когда вы нашли список, интересующий вас на целевой странице Marketplace, щелкните список, чтобы открыть страницу сведений о списке.

2. Нажмите кнопку "Получить мгновенный доступ" и примите условия Databricks.

3. (Необязательно) В разделе "Дополнительные параметры" измените предлагаемое имя каталога.

   Имя каталога отображается в обозревателе каталогов в рабочей области Azure Databricks и используется в трехкомпонентном пространстве имен (catalog.schema.table|volume|view) в запросах. Имя по умолчанию можно изменить.

4. Нажмите кнопку "Получить мгновенный доступ ".

5. Нажмите кнопку "Открыть ", чтобы просмотреть продукт данных, который отображается как каталог только для чтения в обозревателе каталогов.

   Сведения об управлении доступом к каталогам в Azure Databricks см. в разделе Доступ к общим данным с использованием Unity Catalog.

Если доступны примеры записных книжек, они отображаются в заголовке "Пример записной книжки " в списке.

Чтобы просмотреть записную книжку, нажмите кнопку "Предварительная версия записной книжки ". Чтобы импортировать записную книжку в рабочую область Azure Databricks и запустить её, щелкните Просмотр записной книжки, а затем щелкните Импортировать записную книжку. См. записные книжки Databricks.

Запрос продуктов данных, требующих утверждения поставщика

Для некоторых продуктов данных требуется утверждение поставщика, как правило, потому что участвует коммерческая транзакция, или поставщик может предпочесть настроить продукты данных для вас. Эти списки на странице сведений о списке обозначены как по запросу и содержат кнопку Запрос доступа.

1. Когда вы нашли список, интересующий вас на целевой странице Marketplace, щелкните список, чтобы открыть страницу сведений о списке.

2. Нажмите кнопку "Запрос доступа ".

3. Введите имя, компанию и краткое описание предполагаемого использования для продукта данных.

4. Примите условия и положения Databricks и нажмите Запрос доступа.

5. Вы будете получать уведомления по электронной почте, когда поставщик завершил проверку вашего запроса.

   Вы также можете отслеживать ход выполнения запроса на странице "Мои запросы" в Marketplace. См. статью "Управление общими продуктами данных Databricks Marketplace". Однако все последующие транзакции будут использовать обмен данными поставщика и платформы оплаты. Коммерческие транзакции не обрабатываются непосредственно в Databricks Marketplace.

6. По завершении транзакции поставщик данных сделает продукт данных доступным для вас в качестве каталога только для чтения в рабочей области.

   Сведения об управлении доступом к каталогам в Azure Databricks см. в разделе Доступ к общим данным с использованием Unity Catalog.

Получение доступа к внешним серверам MCP

Серверы протокола контекста модели (MCP) предоставляют средства и API, которые агенты могут использовать для взаимодействия с внешними системами. В Azure Databricks Marketplace можно установить внешние серверы MCP для использования с разработкой агентов в Azure Databricks, включая агента руководителя и платформу искусственного интеллекта.

При установке внешнего сервера MCP из Marketplace создается подключение каталога Unity, которое агенты могут использовать для доступа к этим средствам. Можно создать несколько подключений к одному серверу MCP.

Дополнительные сведения об использовании установленных серверов MCP в агентах или подключении к пользовательским серверам MCP, не в Marketplace, см. в статье "Подключение агентов к сторонним средствам с помощью служб MCP".

Чтобы установить сервер MCP, выполните приведенные действия.

1. Найдите список серверов MCP в Marketplace или на вкладке "Серверы MCP агентов>".

2. Нажмите кнопку "Установить" на странице "Карточка описания" или "Сведения".

3. В диалоговом окне установки настройте подключение:

   • Имя подключения: Введите имя подключения каталога Unity.
   • Хозяин: Домен узла для этого сервера MCP. Это поле может быть предварительно заполнено.
   • Базовый путь: Базовый путь для этого сервера MCP. Это поле может быть предварительно заполнено.

   Если тип учетных данных является маркером носителя, введите следующие учетные данные:

   • Маркер носителя: укажите маркер носителя.

   Если тип учетных данных — OAuth U2M, введите следующие учетные данные:

   • Идентификатор клиента: идентификатор клиента.
   • Секрет клиента: Ваш секрет клиента.

   Сведения о получении учетных данных см. в документации поставщика сервера MCP.

4. Щелкните Установить.

После завершения установки на странице отображаются сведения о подключении, где можно просмотреть свойства подключения и предоставить другим пользователям доступ к серверу MCP.

Получение доступа к сторонним приложениям

Сторонние приложения в Marketplace разрабатываются другими поставщиками программного обеспечения, консультантами и партнерами по обмену данными для предоставления общего доступа к приложениям. Когда поставщик отправляет приложение для отправки в Marketplace, приложение проходит комплексный процесс проверки безопасности, прежде чем его можно опубликовать в Marketplace.

Сторонние приложения выполняются в среде Azure Databricks и используют вычислительные ресурсы, поэтому данные остаются в рабочей области.

Приложению, которое вы хотите установить, могут потребоваться скрипты установки для ноутбука, чтобы настроить и сконфигурировать необходимые ему ресурсы и компоненты. Импортируйте записную книжку в рабочую область перед установкой приложения. См. статью "Получить доступ к продуктам данных", которые мгновенно доступны.

Чтобы установить и использовать сторонние приложения, выполните приведенные ниже действия.

1. На домашней странице или на целевой странице Marketplace найдите и выберите стороннее приложение, которое вы хотите установить. Они группируются в разделе "Приложения".
2. Щелкните "Установить" в правом верхнем углу.
3. Прочтите и примите любые условия. Нажмите кнопку Продолжить.
4. Вы будете перенаправлены в Databricks Apps.
5. Настройте необходимые ресурсы приложения и предоставьте разрешения для необходимых областей приложений. Ресурсы приложений могут включать задания, хранилища SQL, ресурсы данных каталога Unity и размер вычислительных ресурсов.
6. Нажмите кнопку Далее.
7. При необходимости измените имя приложения, описание и политику использования.
8. Нажмите кнопку "Установить".

После установки приложения вы можете найти приложение в Databricks Apps на значке приложения коммутатора в Marketplace. Нажмите Затем в меню «Кебаб» нажмите Изменить в правом верхнем углу, чтобы настроить параметры приложения.

Когда доступны новые версии, вы получите заметку, чтобы обновить их на странице "Приложения Databricks".

Доступ к общим данным с помощью каталога Unity

Доступ к данным в рабочей области Azure Databricks зависит от типа продукта данных:

• Наборы данных и модели Marketplace предоставляются вам в каталоге только для чтения в Azure Databricks. Каталоги — это контейнер верхнего уровня для ресурсов данных, управляемых каталогом Unity. Дополнительные сведения о иерархии объектов данных в каталоге Unity см. в разделе Database в Azure Databricks.

  Когда поставщик предоставил вам общий доступ к данным, вы можете получить доступ к каталогу несколькими способами. В следующих разделах описаны некоторые из этих параметров доступа.

• Записные книжки непосредственно публикуются в списке на Marketplace, и вы можете импортировать их из списка в вашу рабочую область.

Доступ к общим наборам данных в Marketplace

Чтобы получить доступ к общим данным из Marketplace, выполните следующие действия.

1. На боковой панели щелкните Marketplace.

2. На целевой странице Marketplace щелкните "Мои запросы " в правом верхнем углу.

3. На вкладке "Установленные продукты данных" найдите продукт данных, щелкните В конце строки продукта данных выберите " Просмотреть данные".

   Вы также можете щелкнуть имя продукта данных, чтобы открыть страницу сведений о продукте данных, где можно нажать кнопку "Открыть ", чтобы просмотреть данные.

   Обозреватель каталогов открывается в каталоге, который содержит набор данных, где можно получить доступ к данным или управлять доступом для других участников команды. См. раздел "Предоставление доступа к другим участникам команды".

   Дополнительные сведения о доступе к общим данным в Azure Databricks см. в статье "Чтение данных" с помощью Databricks to Databricks OpenSharing (для получателей).

Доступ к общим наборам данных в обозревателе каталогов

Чтобы получить доступ к общим данным непосредственно из обозревателя каталогов, выполните приведенные далее действия.

1. На боковой панели щелкните Каталог.
2. Если вы знаете имя каталога, в котором хранятся общие данные, найдите его и выберите его.

Если вы не знаете имя каталога, но знаете имя поставщика, вы можете найти каталог в обозревателе каталогов, выполнив указанные ниже действия.

1. На боковой панели щелкните Каталог.
2. В левой области обозревателя каталогов нажмите кнопку OpenSharing и отправьте мне общий доступ.
3. На вкладке "Поставщики" щелкните имя поставщика.
4. На вкладке "Общие папки " найдите имя каталога и щелкните его, чтобы открыть его.

Доступ к общим наборам данных с помощью интерфейса командной строки Databricks или инструкций SQL

Вы также можете найти и получить доступ к каталогу, который содержит общие данные, используя Databricks CLI или SQL инструкции в записной книжке Azure Databricks или запрос редактора Databricks SQL. Дополнительные сведения см. в разделе "Доступ к данным в общей таблице или томе". Вы можете пропустить разделы, описывающие создание каталога, так как Databricks Marketplace делает это для вас.

Предоставление доступа другим участникам команды

Если вы являетесь пользователем, запрашивающим общие данные, вы являетесь владельцем каталога, содержащего эти данные в рабочей области. Таким образом, вы можете предоставить членам команды доступ к каталогу и детализировать доступ на уровне схемы, таблицы, представления, строки и столбца, так же, как это делается для любых данных в каталоге Unity. См. статью Управление привилегиями в каталоге Unity. Тем не менее, таблицы и представления данных в общем каталоге доступны только для чтения, что означает, что вы можете предоставлять только операции чтения, например DESCRIBE, SHOW и SELECT.

Вы также можете передать владение каталогом или объектами внутри него.

Просмотр примеров записных книжек

Некоторые описания включают примеры записных книжек на странице сведений о списке. Чтобы получить доступ к этим записным книжкам с мгновенно доступными списками, которые были переданы вам:

1. На боковой панели щелкните Marketplace.
2. На целевой странице Marketplace щелкните "Мои запросы " в правом верхнем углу.
3. На вкладке "Установленные продукты данных" найдите продукт данных и щелкните имя продукта данных, чтобы открыть страницу сведений о списке. Если в списке есть пример записной книжки, он отображается в заголовке примера записной книжки .
4. Щелкните Preview notebook, чтобы просмотреть записную книжку, и Import notebook, чтобы импортировать ее в рабочую область Azure Databricks.

Участие в частных обменах

Некоторые поставщики данных могут делиться определенными данными с ограниченным набором потребителей, которые приглашены быть частью частного обмена. Вы можете найти список частных обменов, установив флажок "Частный обмен " на домашней странице Marketplace. Так же, как и в общедоступных списках, вы можете получить доступ к бесплатным спискам мгновенно или запросить доступ к тем, которые помечены по запросу.

Чтобы присоединиться к частному обмену, поставщику данных необходимо пригласить вашу организацию. Когда они это сделают, они запросят общий идентификатор для вашего хранилища метаданных в каталоге Unity. Чтобы узнать, как получить идентификатор общего доступа к хранилищу метаданных, см. шаг 1 в разделе "Получение доступа" в модели Databricks to Databricks.

Дополнительные сведения о частных обменах см. в статье "Создание частных обменов и управление ими" в Databricks Marketplace.

Отключение доступа к Marketplace

По умолчанию все пользователи в любой рабочей области с поддержкой каталога Unity могут запрашивать продукты данных в Databricks Marketplace. Другими словами, группа имеет привилегию account users для всех хранилищ метаданных каталога Unity, USE MARKETPLACE ASSETS если только администратор хранилища метаданных не отменяет эти привилегии.

Эта привилегия не предоставляет возможность участвовать в финансовых транзакциях с поставщиками данных. Все финансовые транзакции происходят за пределами Azure Databricks. Эта привилегия предоставляет возможность доступа к продуктам данных, которые помечены как бесплатные и мгновенно доступные и продукты данных, которые уже приобретены. Доступ к таким продуктам данных создает новые каталоги только для чтения в Azure Databricks, принадлежащих запрашивающему пользователю, который может предоставить доступ только для чтения другим пользователям.

Администратор хранилища метаданных может отключить всем пользователям возможность запрашивать продукты данных в Databricks Marketplace, отозвав привилегии у группы USE MARKETPLACE ASSETS в метахранилище каталога Unity. Если вы отмените эту привилегию, пользователи могут продолжать просматривать Databricks Marketplace в своей рабочей области, но не могут запрашивать продукты данных.

Требуется разрешение: администратор хранилища метаданных

Обозреватель каталогов

Чтобы отменить привилегию USE MARKETPLACE ASSETSaccount users для группы, выполните следующие действия.

1. В рабочей области Azure Databricks щелкните Catalog.
2. Щелкните значок ссылки рядом с именем хранилища метаданных в левом верхнем углу.
3. Найдите строку, которая предоставляет account users привилегию USE MARKETPLACE ASSETS.
4. Установите флажок рядом с строкой и нажмите кнопку "Отозвать ".
5. Подтвердите действие отзыва.
6. Предоставьте права всем определенным пользователям и группам, которые вам нравится, нажав кнопку "Предоставить".

SQL

Чтобы отозвать привилегии USE MARKETPLACE ASSETSaccount users для группы, выполните следующую команду в записной книжке или редакторе sql-запросов Databricks.

REVOKE USE MARKETPLACE ASSETS ON METASTORE FROM `account users`;

Чтобы предоставить привилегии USE MARKETPLACE ASSETS определенному пользователю или группе, выполните следующую команду в записной книжке или редакторе sql-запросов Databricks.

GRANT USE MARKETPLACE ASSETS ON METASTORE TO `<user-or-group>`;

Если вы совсем не хотите, чтобы пользователи могли просматривать домашнюю страницу Marketplace, обратитесь к команде вашей учетной записи Azure Databricks.

Известные проблемы

Если запрос на доступ отклоняется поставщиком данных, вы не можете снова запросить тот же продукт данных. Если вы столкнулись с этой проблемой, обратитесь к поставщику или к команде по работе с аккаунтами Azure Databricks.

Поделитесь своим мнением

Мы хотели бы услышать, что вы думаете о Databricks Marketplace.

• Есть отзывы? Перейдите на страницу "Сведения > о предоставлении отзывов" на домашней странице Marketplace.
• Хотите просмотреть дополнительные наборы данных в Marketplace? Щелкните " Предложить продукт " на домашней странице Marketplace.

Следующие шаги

• Управление запросами и данными Marketplace, которые были с вами разделены