Поделиться через


Преобразования с использованием искусственного интеллекта в преобразованиях сочетаний клавиш OneLake

Important

Преобразования ИИ для сочетаний клавиш OneLake в настоящее время являются общедоступной предварительной версией. Функции и поведение могут изменяться до общедоступной доступности.

Современные озера данных наполнены необработанным, неструктурированным текстом, обзорами продуктов, письмами службы поддержки, журналами устройств Интернета вещей и т. д. Преобразование этого текста в полезные аналитические сведения обычно требует пользовательского кода, конвейеров оркестрации и постоянного обслуживания. Преобразования ярлыков OneLake удаляют эти издержки: вы указываете на свои файлы один раз, выбираете преобразование ИИ, а Фабрика выполняет остальные действия.

Зачем использовать преобразования, управляемые ИИ?

Benefit Что это значит для вас
Accelerate time-to-insight Переход от необработанного текста к таблице Delta, которую можно запрашивать, за считанные минуты, без необходимости в ETL.
Lower maintenance Модуль преобразования просматривает исходную папку по 2-минутному расписанию, поэтому выходные данные остаются актуальными автоматически.
Enterprise-grade security Обнаружение персональных данных помогает соблюдать GDPR, HIPAA и другие нормативные акты, редактируя конфиденциальные данные до их использования в аналитике.
Согласованные повторяемые результаты Встроенные модели искусственного интеллекта обеспечивают стандартные оценки тональности, теги сущностей и переводы, исключая сдвиги, связанные с ручной подготовкой данных.

Преобразования Сочетаний клавиш OneLake в Microsoft Fabric включают набор встроенных преобразований с поддержкой искусственного интеллекта, которые можно применять непосредственно к .txt файлам, на которые ссылаются сочетания клавиш, без написания кода или создания конвейеров. Движок автоматически поддерживает выходную таблицу Delta в синхронизированном состоянии, поэтому данные готовы для выполнения запросов в Power BI, записных книжках, конвейерах и других возможностях Fabric.

Поддерживаемые преобразования Искусственного Интеллекта

Transform Purpose
Summarization Создает краткие сводки из длинного текста.
Translation Переводит текст между поддерживаемыми языками.
Sentiment analysis Помечает тональность текста как положительная, отрицательная или нейтральная.
PII detection Находит и редактирует личные данные (имена, номера телефонов, электронные письма).
Name recognition Извлекает именованные сущности, такие как люди, организации или местоположения.

Note

Преобразования ИИ в настоящее время поддерживают .txt файлы только в качестве входных данных.

Пример — обнаружение персональных идентификационных данных (PII) в обратной связи от клиентов

Отзывы клиентов, хранящиеся в озере данных, могут содержать конфиденциальные сведения (имена, сообщения электронной почты, номера телефонов). Примените преобразование обнаружения личной информации (PII) для автоматического сканирования и маскирования этого содержимого, чтобы создать таблицу Delta, соответствующую требованиям конфиденциальности.

Принцип работы

  1. Создание ярлыка
    Ссылка на папку .txt файлов в Azure Data Lake, Amazon S3 или другой источник сочетаний клавиш OneLake.
  2. Выберите преобразование ИИ
    Выберите одно из поддерживаемых преобразований во время создания ярлыка.
  3. Automatic sync
    Модуль проверяет исходную папку каждые 2 минуты. Новые, измененные или удаленные файлы отражаются в таблице Delta.
  4. Query-ready output
    Используйте полученную таблицу немедленно в отчетах, записных книжках или подчиненных конвейерах.

Regional availability

Преобразования с поддержкой искусственного интеллекта в настоящее время доступны в этих регионах: региональная поддержка языка ИИ Azure