Регистрация внешних служб данных (EDS) в Azure Data Manager для энергетики

В этой статье объясняется, как зарегистрировать внешние службы данных (EDS) в Azure Data Manager для энергетики. EDS позволяет получить и принять данные (метаданные) из внешних источников данных. Кроме того, он позволяет получать массовые данные по запросу.

Предпосылки

  • Скачайте и импортируйте коллекцию Postman API для EDS.
  • Дополнительные сведения о регистрации источника данных см. в Разделе 2.2 в osdu-eds-data-supplier-enablement-guide.
  • Просмотрите разделы реестра подключенных источников (CSRE) и задания подключения источника данных (CSDJ) в документе EDS_Documentation-1.0.docx, чтобы понять различные параметры, используемые при регистрации источника данных.
  • Кроме того, ознакомьтесь с руководством по настройке EDS для получения дополнительных сведений о параметрах конфигурации EDS.
  • Для запуска EDS пользователь должен быть членом service.eds.user группы прав. Кроме того, чтобы получить доступ к секретному сервису, пользователь должен быть членом следующих полномочий: service.secret.viewer, service.secret.editor, service.secret.admin.

Запуск рабочего процесса получения и ввода EDS

Выполните API в следующих коллекциях, чтобы зарегистрировать внешний источник данных, на котором по расписанию выполняется рабочий процесс EDS Fetch и Ingest.

  1. 001: Pre-req: Validate Schema Registration
  2. 002: Pre-req: Validate Reference Data
  3. 003: Secret Service
  4. 004: Add Source Registry and Data Job

После успешной регистрации данных данные регулярно извлекается из внешних источников и добавляются в Azure Data Manager для энергетики. Вы можете использовать службу поиска для поиска ваших загруженных данных.

Устранение неполадок

Выполните следующие запросы Kusto в рабочей области Log Analytics, чтобы определить проблемы с регистрацией источника данных.

OEPAirFlowTask 
| where DagName == "eds_ingest" or DagName == "eds_scheduler"        
| where LogLevel == "ERROR" // ERROR/DEBUG/INFO/WARNING

Получение массовых данных по запросу

Используйте API getRetrievalInstructions для 005: Dataset Service collection получения массовых данных из внешних источников данных по запросу.

Ссылки

  • Last updated on