Поделиться через

Перемещение данных из базы данных SQL Azure в Lakehouse с помощью помощника по копированию

  • Статья

В этом руководстве описаны шаги по перемещению данных в Lakehouse.

Два подхода предоставляются с помощью помощника по копированию:

  1. Первый подход перемещает исходные данные в целевые таблицы с разностным форматом.
  2. Второй подход перемещает исходные данные в целевые файлы.

Необходимые компоненты

Чтобы приступить к работе, необходимо выполнить следующие предварительные требования:

  • Учетная запись клиента с активной подпиской. Создайте учетную запись бесплатно .
  • Создается рабочая область.
  • Lakehouse создается в рабочей области.

Перемещение файлов в Lakehouse в виде таблиц в разностном формате с помощью помощника по копированию

Выполните следующие действия, чтобы настроить действие копирования.

Шаг 1. Начало работы с помощником по копированию

  1. Откройте существующий конвейер данных или создайте новый конвейер данных.

  2. Выберите помощник по копированию данных на холсте, чтобы открыть мастер и начать работу. Или выберите "Использовать помощник по копированию" в раскрывающемся списке "Копирование данных " на вкладке "Действия " на ленте.

    Снимок экрана: два места, где можно получить доступ к помощнику по копированию.

Шаг 2. Настройка источника

  1. Выберите источник данных, выбрав тип источника данных. В этом руководстве мы будем использовать База данных SQL Azure в качестве примера. Выполните поиск на экране "Выбор источника данных", чтобы найти и выбрать База данных SQL Azure.

    Снимок экрана: выбор источника данных на экране копирования данных.

  2. Создайте подключение к источнику данных, заполнив необходимые сведения о подключении на панели.

    Снимок экрана: место для выбора нового подключения.

    После заполнения необходимых сведений о подключении на панели нажмите кнопку "Далее".

    Если вы еще не выбрали базу данных изначально, список баз данных будет представлен для выбора.

    Снимок экрана: место обновления сведений о подключении.

  3. Выберите таблицы, которые необходимо переместить. Затем выберите Далее.

    Снимок экрана: место выбора таблиц.

Шаг 3. Настройка назначения

  1. Выберите Lakehouse в качестве места назначения и нажмите кнопку "Далее".

    Снимок экрана: место для выбора места назначения копирования.

    Введите имя Lakehouse, а затем нажмите кнопку "Создать" и подключиться.

    Снимок экрана: место выбора хранилища данных.

  2. Настройте и сопоставите исходные данные с целевой таблицей Lakehouse. Выберите таблицы для корневой папки и загрузите новую таблицу для параметров загрузки. Укажите имя таблицы и нажмите кнопку "Далее".

    Снимок экрана: место назначения таблицы.

  3. Проверьте конфигурацию и снимите флажок "Начать передачу данных". Затем нажмите кнопку "Далее ", чтобы завершить работу помощника.

    Снимок экрана, показывающий, где выбрать ок на экране проверки и создания.

Шаг 4. Сохранение конвейера данных и его запуск для загрузки данных

  1. Выберите "Запустить" на панели инструментов "Главная", а затем нажмите кнопку "Сохранить и запустить" при появлении запроса.

    Снимок экрана, показывающий, где выбрать команду

  2. Для каждого выполняемого действия можно выбрать соответствующую ссылку действия на вкладке "Выходные данные" после запуска конвейера, чтобы просмотреть сведения о действии. В этом случае у нас есть 2 отдельных действия копирования, которые выполнялись — по одному для каждой таблицы, скопированной из SQL Azure в Lakehouse. При выборе ссылки сведений о действии можно увидеть, как данные mmuch были считываются и записываются, а также сколько места используются в исходном и целевом расположении, а также скорость пропускной способности и другие сведения.

    Снимок экрана, показывающий, где выбрать значок очков и полученный экран сведений.

Шаг 5. Просмотр таблиц из Lakehouse

  1. Перейдите в Lakehouse и обновите представление озера, чтобы увидеть последние данные приема.

  2. Перейдите в представление таблицы, чтобы просмотреть данные в таблице.

    Снимок экрана, показывающий, где переключиться в представление таблицы.

    Примечание.

    В настоящее время данные попадают в папки "Таблицы Lakehouse" (управляемая область) только в разностном формате. Эти файлы будут автоматически зарегистрированы в качестве таблицы и отображаются в представлении таблиц на портале Lakehouse. Только папки первого слоя в таблицах будут зарегистрированы в виде разностной таблицы. Просмотр или просмотр из таблицы Lakehouse еще не поддерживается. Данные, которые загружаются в ту же таблицу, будут добавлены. Удаление и обновление таблиц еще не поддерживается.

Связанный контент

В этом примере показано, как переместить данные из базы данных SQL Azure в Lakehouse с помощником по копированию в фабрике данных Microsoft Fabric. Вы научились выполнять следующие задачи:

  • Перемещение файлов в Lakehouse в виде таблиц в разностном формате с помощью помощника по копированию.

Затем перейдите к дополнительным сведениям о мониторинге выполнения конвейера.

Мониторинг выполнения конвейера в Microsoft Fabric