Интеграция пулов SQL и Apache Spark в Azure Synapse Analytics

Средний уровень
Инженер по анализу и обработке данных
Azure Synapse Analytics

Узнайте, как интегрировать пулы SQL и Apache Spark в Azure Synapse Analytics.

Цели обучения

После завершения этого модуля вы сможете:

  • Описание методов интеграции между пулами SQL и Spark в Azure Synapse Analytics
  • Понять случаи использования пулов SQL и Spark в интеграции
  • Аутентификация в Azure Synapse Analytics
  • Передача данных между пулом SQL и Spark в Azure Synapse Analytics
  • Проверка подлинности между Spark и пулом SQL в Azure Synapse Analytics
  • Интеграция пулов SQL и Spark в Azure Synapse Analytics
  • Вынесение использования пулов Spark во внешнюю среду в рабочей области Azure Synapse.
  • Передача данных за пределы рабочей области Synapse с помощью проверки подлинности SQL
  • Передача данных за пределы рабочей области Synapse с помощью соединителя PySpark
  • Преобразование данных в Apache Spark и запись данных обратно в пул SQL в Azure Synapse Analytics

Предварительные требования

Перед началом изучения этого модуля рекомендуется изучить следующие модули.

  • Основные принципы работы с данными
  • Введение в Azure Data Factory
  • Общие сведения об Azure Synapse Analytics