Поделиться через


Настройка Google BigQuery в действии копирования

В этой статье описывается, как использовать действие копирования в конвейере данных для копирования данных из Google BigQuery.

Поддерживаемая конфигурация

Для настройки каждой вкладки в действии копирования перейдите к следующим разделам соответственно.

Общие

Ознакомьтесь с руководством по общим параметрам, чтобы настроить вкладку "Общие параметры".

Исходный код

Следующие свойства поддерживаются для Google BigQuery на вкладке "Источник " действия копирования.

Снимок экрана: вкладка источника.

Требуются следующие свойства:

  • Тип хранилища данных: выберите "Внешний".
  • Подключение. Выберите подключение Google BigQuery из списка подключений. Если подключение не существует, создайте новое подключение Google BigQuery, нажав кнопку "Создать".
  • Используйте запрос: выберите из таблицы или Google SQL.
    • Если выбрать таблицу:

      • Таблица: укажите имя таблицы Google BigQuery. Выберите таблицу из раскрывающегося списка или нажмите кнопку "Изменить ", чтобы вручную ввести ее.

        Снимок экрана: использование запроса — таблица.

    • Если выбрать Google SQL, выполните следующие действия:

      • Google SQL: используйте настраиваемый SQL-запрос для чтения данных. Например, SELECT * FROM MyTable. Дополнительные сведения см. в синтаксисе запросов.

        Снимок экрана: запрос

В разделе "Дополнительно" можно указать следующие поля:

  • Дополнительные столбцы: добавление дополнительных столбцов данных для хранения относительного пути или статического значения исходных файлов. Выражение поддерживается для последнего.

Сопоставление

Сведения о настройке вкладки "Сопоставление" см. в разделе "Настройка сопоставлений" на вкладке "Сопоставление".

Настройки

Для настройки вкладки Параметры перейдите к разделу "Настройка других параметров" на вкладке "Параметры".

Сводка таблицы

В следующих таблицах содержатся дополнительные сведения о действии копирования в Google BigQuery.

Сведения об источнике

Имя Описание Значение Обязательное поле Свойство скрипта JSON
Тип хранилища данных Тип хранилища данных. Внешний Да /
Соединение Подключение к исходному хранилищу данных. <подключение Google BigQuery> Да подключение
Тип подключения Тип подключения. Выберите Google BigQuery. Google BigQuery Да /
Использование запроса Способ чтения данных. Примените таблицу для чтения данных из указанной таблицы или примените Google SQL для чтения данных с помощью запросов SQL. Таблица
Google SQL
Да /
Для таблицы
Имя набора данных Имя набора данных Google BigQuery. < имя набора данных > Нет (если указан Google SQL ) набор данных
имя таблицы Имя таблицы. < имя таблицы > Нет (если указан Google SQL ) table
Для Google SQL
Google SQL Используйте пользовательский SQL-запрос для чтения данных. Например, SELECT * FROM MyTable. Дополнительные сведения см. в синтаксисе запросов. < Запрос Google SQL > Нет (если указана таблица ) query
Дополнительные столбцы Добавьте дополнительные столбцы данных для хранения относительного пути или статического значения исходных файлов. Выражение поддерживается для последнего. • Имя
•Значение
No additionalColumns:
•Имя
•Значение