Копирование из хранилища BLOB-объектов Azure в Lakehouse

2025-03-27

В этом руководстве вы создадите конвейер данных для перемещения CSV-файла из входной папки хранилища Azure Blob Storage в хранилище данных Lakehouse.

Предварительные условия

Чтобы приступить к работе, необходимо выполнить следующие предварительные требования:

Убедитесь, что у вас есть рабочая область с поддержкой Project Microsoft Fabric: создайте рабочую область.
Нажмите кнопку "Попробовать сейчас!", чтобы подготовить источник данных Azure Blob Storage для модуля Copy. Создайте новую группу ресурсов для этого Хранилища BLOB-объектов Azure и выберите Просмотр + Создание>Создать.

Затем создается Хранилище BLOB-объектов Azure и moviesDB2.csv отправляется в входную папку созданного Хранилище BLOB-объектов Azure.

Создание конвейера данных

Переключитесь на фабрику данных на странице app.powerbi.com.
Создайте рабочую область для этой демонстрации.
Выберите «Создать», а затем выберите «Конвейер данных».

Копирование данных с помощью помощника по копированию

В этом сеансе вы начнете создавать конвейер данных, выполнив следующие действия. Эти действия копируют CSV-файл из папки входящих файлов облака Azure Blob Storage в место назначения Lakehouse с помощью помощника по копированию.

Шаг 1. Начало работы с помощником по созданию копий

Выберите инструмент копирования данных на холсте, чтобы открыть помощника по копированию для начала работы. Или выберите «Использовать помощник по копированию» из раскрывающегося списка «Копирование данных» на вкладке «Действия» в ленте.

Шаг 2. Настройка источника

Введите большой двоичный объект в фильтре выбора, а затем выберите "Большие двоичные объекты Azure" и нажмите кнопку "Далее".
Укажите имя учетной записи или URL-адрес и создайте подключение к источнику данных, выбрав в раскрывающемся списке "Создать новое подключение".
1. Выбрав Создать новое подключение с указанной учетной записью хранения, необходимо заполнить только тип проверки подлинности. В этой демонстрации мы выбираем ключ учетной записи, но вы можете выбрать другой тип проверки подлинности в зависимости от вашего предпочтения.
2. После успешного создания подключения необходимо только выбрать "Далее" для подключения к источнику данных.
Выберите файл moviesDB2.csv в исходной конфигурации для предварительной версии, а затем нажмите кнопку "Далее".

Шаг 3. Настройка назначения

Выберите Lakehouse.
Укажите имя нового Lakehouse. Затем нажмите кнопку "Создать" и подключиться.
Настройте и сопоставите исходные данные с назначением; затем нажмите кнопку "Далее ", чтобы завершить конфигурации назначения.

Шаг 4. Просмотр и создание действия копирования

Просмотрите параметры действия копирования на предыдущих шагах и нажмите кнопку "Сохранить и запустить ", чтобы завершить работу. Вы также можете вернуться к предыдущим шагам, чтобы изменить параметры при необходимости в средстве.
После завершения активность копирования добавляется на полотно конвейера данных и выполняется непосредственно, если вы оставили флажок "Немедленно запустить передачу данных" выделенным.

Запуск и планирование конвейера данных

Если вы не оставили флажок "Начать передачу данных" на странице "Просмотр и создание", перейдите на вкладку "Главная" и нажмите кнопку "Выполнить". Затем нажмите кнопку "Сохранить и запустить".
На вкладке "Выходные данные" выберите ссылку с названием вашей операции Copy, чтобы отслеживать ход выполнения и проверять результаты.
В диалоговом окне "Копирование данных" отображаются результаты выполнения, включая состояние, объем данных, чтение и запись, время запуска и остановки, а также длительность.
Вы также можете запланировать запуск конвейера с определенной частотой. В следующем примере показано, как запланировать запуск конвейера каждые 15 минут.