Общие сведения об интеграции Azure Databricks

Databricks обеспечивает интеграцию для подключения к ассортименту источников данных и средств бизнес-аналитики. Кроме того, с помощью средств разработчика Databricks можно подключиться к Databricks с локального компьютера, чтобы автоматизировать рабочие процессы, создавать пользовательские решения и многое другое.

Подключение партнёров

Partner Connect — это пользовательский интерфейс, который позволяет проверенным решениям быстрее интегрироваться с кластерами Databricks и хранилищами SQL.

Дополнительные сведения см. в разделе "Что такое Databricks Partner Connect?".

Источники данных

Databricks может считывать данные и записывать их в различные форматы данных, такие как CSV, Delta Lake, JSON, Parquet, XML и другие, а также взаимодействовать с поставщиками хранилищ данных, такими как Amazon S3, Google BigQuery, Cloud Storage, Snowflake и другие.

См. параметры приемаданных, подключения к источникам данных и внешним службам и параметрам формата данных.

Средства бизнес-аналитики

Databricks проверил интеграцию с любимыми инструментами бизнес-аналитики, включая Power BI, Tableau и другие, что позволяет работать с данными с помощью кластеров Databricks и хранилищ SQL во многих случаях с низким кодом и без кода.

Полный список с инструкциями по подключению см. в разделе бизнес-аналитики и визуализации.

Другие средства ETL

Помимо доступа ко всем видам источников данных, Databricks обеспечивает интеграцию для средств ETL/ELT, таких как dbt, prophecy и Azure Data Factory; и средства оркестрации конвейеров данных, такие как Airflow; и средства базы данных SQL, такие как DataGrip, DBeaver и SQL Workbench/J.

Инструкции по подключению см. в разделе "Подготовка и преобразование данных" исоединители SQL, библиотеки, драйверы, API и средства.

Приложения Databricks

Databricks Apps позволяет разработчикам создавать и развертывать безопасные данные и приложения ИИ непосредственно на платформе Databricks, что устраняет необходимость отдельной инфраструктуры. Приложения выполняются на бессерверной платформе и интегрируются со службами ключевых платформ, включая каталог Unity для управления данными, Databricks SQL для запроса данных и OAuth для проверки подлинности.

Дополнительные сведения см. в разделе "Приложения Databricks".

Папки Git

Папки Databricks Git обеспечивают интеграцию на уровне репозитория с любимыми поставщиками Git, чтобы вы могли разрабатывать код в записной книжке Databricks и синхронизировать его с удаленным репозиторием Git. Ознакомьтесь с папками Azure Databricks Git.

Инструменты разработчика

Databricks предлагает такие средства разработчика, как ИНТЕРФЕЙС командной строки Databricks и Databricks Connect, которые позволяют программным способом выполнять рабочие процессы и получать доступ к вычислительным ресурсам Azure Databricks, включая хранилища SQL, и создавать пользовательские решения, которые интегрируются с Databricks в любимой интегрированной среде разработки.

Полный список инструментов, поддерживающих разработчиков, см. в статье "Разработка на Databricks".