Получение от поколения 1 к потоку данных поколения 2
Поток данных 2-го поколения — это новое поколение потоков данных. Новое поколение потоков данных находится вместе с потоком данных Power BI (1-го поколения) и предоставляет новые функции и улучшенные возможности. В следующем разделе представлено сравнение потока данных 1-го поколения и потока данных 2-го поколения.
Обзор возможностей
| Функция | Поток данных 2-го поколения | Поток данных 1-го поколения |
|---|---|---|
| Создание потоков данных с помощью Power Query | ✓ | ✓ |
| Короткий поток разработки | ✓ | |
| Автоматическая сохранение и фоновая публикация | ✓ | |
| Целевое расположение данных | ✓ | |
| Улучшен журнал мониторинга и обновления | ✓ | |
| Интеграция с конвейерами данных | ✓ | |
| Высокомасштабные вычислительные ресурсы | ✓ | |
| Получение данных с помощью соединителя потоков данных | ✓ | ✓ |
| Прямой запрос через соединитель потоков данных | ✓ | |
| Добавочное обновление | ✓ | |
| поддержка Аналитика ИИ | ✓ |
Более короткий процесс разработки
Работа с Dataflow 2-го поколения чувствует себя как возвращение домой. Мы сохранили полный интерфейс Power Query, который вы используете в потоках данных Power BI. При вводе интерфейса пошаговые инструкции по получению данных в поток данных. Мы также сокращаем возможности разработки, чтобы сократить количество шагов, необходимых для создания потоков данных, и добавили несколько новых функций, чтобы сделать работу еще лучше.
Новый интерфейс сохранения потока данных
С помощью потока данных 2-го поколения мы изменили способ сохранения потока данных. Все изменения, внесенные в поток данных, автоматически сохраняются в облаке. Таким образом, вы можете выйти из процесса разработки в любой момент и продолжить работу с тем, откуда вы оставили в дальнейшем. После завершения разработки потока данных вы опубликуете изменения и эти изменения используются при обновлении потока данных. Кроме того, публикация потока данных сохраняет изменения и выполняет проверки, которые должны выполняться в фоновом режиме. Эта функция позволяет сохранять поток данных, не ожидая завершения проверки.
Чтобы узнать больше о новом интерфейсе сохранения, перейдите к разделу "Сохранить черновик потока данных".
Целевое расположение данных
Аналогично Dataflow 1-го поколения, dataflow 2-го поколения позволяет преобразовать данные в внутреннее или промежуточное хранилище потока данных, где его можно получить с помощью соединителя потока данных. Поток данных 2-го поколения также позволяет указать назначение данных для данных. С помощью этой функции теперь можно разделить логику ETL и целевое хранилище. Эта функция дает вам множество преимуществ. Например, теперь можно использовать поток данных для загрузки данных в lakehouse, а затем использовать записную книжку для анализа данных. Кроме того, можно использовать поток данных для загрузки данных в базу данных SQL Azure, а затем использовать конвейер данных для загрузки данных в хранилище данных.
В Dataflow 2-го поколения мы добавили поддержку следующих назначений, и многие другие будут в ближайшее время:
- Fabric Lakehouse
- Azure Data Explorer (Kusto)
- Azure Synapse Analytics (Хранилище данных SQL)
- База данных SQL Azure
Примечание.
Чтобы загрузить данные в хранилище Fabric, можно использовать соединитель Azure Synapse Analytics (ХРАНИЛИЩЕ данных SQL), извлекая строка подключения SQL. Дополнительные сведения: Подключение чувствительность к хранилищу данных в Microsoft Fabric
Новый журнал обновлений и мониторинг
В Dataflow 2-го поколения мы представляем новый способ мониторинга обновлений потока данных. Мы интегрируем поддержку Центра мониторинга и предоставляем возможности обновления для основного обновления.
Интеграция с конвейерами данных
Конвейеры данных позволяют группировать действия, которые вместе выполняют задачу. Действие — это единица работы, которую можно выполнить. Например, действие может копировать данные из одного расположения в другое, выполнять SQL-запрос, выполнять хранимую процедуру или запускать записную книжку Python.
Конвейер может содержать одно или несколько действий, подключенных зависимостями. Например, можно использовать конвейер для приема и очистки данных из большого двоичного объекта Azure, а затем запустить поток данных 2-го поколения для анализа данных журнала. Вы также можете использовать конвейер для копирования данных из большого двоичного объекта Azure в базу данных SQL Azure, а затем выполнить хранимую процедуру в базе данных.
Сохранить как черновик
При использовании dataflow 2-го поколения мы предлагаем бесплатный интерфейс, удаляя необходимость публикации для сохранения изменений. При сохранении в виде черновиков функции мы сохраняем черновую версию потока данных каждый раз, когда вы вносите изменения. Вы потеряли подключение к Интернету? Вы случайно закрыли браузер? Без волнений; мы вернулись. Когда вы вернеесь к потоку данных, последние изменения по-прежнему там, и вы можете продолжить работу, где вы оставили. Это простой интерфейс и не требует никаких входных данных от вас. Это позволяет работать с потоком данных, не беспокоясь о потере изменений или необходимости исправлять все ошибки запроса, прежде чем сохранить изменения. Чтобы узнать больше об этой функции, перейдите к разделу "Сохранить черновик потока данных".
Высокомасштабируемые вычислительные ресурсы
Аналогично Dataflow 1-го поколения, dataflow 2-го поколения также предоставляет расширенный вычислительный модуль для повышения производительности обоих преобразований ссылочных запросов и получения сценариев данных. Для этого поток данных 2-го поколения создает элементы Lakehouse и Warehouse в рабочей области и использует их для хранения и доступа к данным для повышения производительности всех потоков данных.
Лицензирование потока данных 1-го поколения и 2-го поколения
Поток данных 2-го поколения — это новое поколение потоков данных, которые находятся вместе с потоком данных Power BI (1-го поколения) и предоставляют новые функции и улучшенные возможности. Для этого требуется емкость Fabric или пробная емкость Fabric. Чтобы лучше понять, как работает лицензирование для потоков данных, ознакомьтесь со следующей статьей: основные понятия и лицензии Microsoft Fabric
Попробуйте использовать поток данных 2-го поколения, повторно используя запросы из потока данных 1-го поколения
У вас, вероятно, есть много запросов потока данных 1-го поколения, и вы хотите узнать, как их можно попробовать в Dataflow 2-го поколения. У нас есть несколько вариантов повторного создания потоков данных 1-го поколения в качестве потока данных 2-го поколения.
Экспорт запросов потока данных 1-го поколения и их импорт в поток данных 2-го поколения
Теперь вы можете экспортировать запросы как в интерфейсе разработки потока данных 1-го поколения, так и в PQT-файл, который можно импортировать в поток данных 2-го поколения. Дополнительные сведения см. в разделе "Использование функции шаблона экспорта".
Копирование и вставка в Power Query
Если у вас есть поток данных в Power BI или Power Apps, вы можете скопировать запросы и вставить их в редактор потока данных 2-го поколения. Эта функция позволяет перенести поток данных в 2-е поколение, не перезаписывая запросы. Дополнительные сведения см. в раздел "Копирование и вставка существующих запросов потока данных 1-го поколения".