INSERT

Applies to: Databricks SQL Databricks Runtime

Вставляет новые строки в таблицу и при необходимости усекает таблицу или ее разделы. Вставляемые строки указываются по выражениям значений или результату запроса.

Databricks does not support INSERT for Hive Avro tables if the timestamp-millis type is present in the table schema.

Syntax

[ common_table_expression ]
  INSERT { OVERWRITE | INTO } [ TABLE ] table_name
    [ PARTITION clause ]
    [ ( column_name [, ...] ) | BY NAME ]
    query

[ common_table_expression ]
  INSERT INTO [ TABLE ] table_name
    [ REPLACE WHERE predicate | REPLACE USING ( column_name [, ...] ) ]
    query

[ common_table_expression ]
  INSERT INTO [ TABLE ] table_name [target_alias]
    REPLACE ON boolean_expression
    { (query) [source_alias] | query }

Parameters

• общее табличное выражение

  Распространенные табличные выражения (CTE) — это один или несколько именованных запросов, которые можно повторно использовать несколько раз в основном блоке запросов, чтобы избежать повторяющихся вычислений или улучшить удобочитаемость сложных вложенных запросов.

• INTO или OVERWRITE

  При указании OVERWRITE применяется следующее:

  • Без partition_spec таблица усечена перед вставкой первой строки.
  • В противном случае перед вставкой первой строки усекаются все разделы, соответствующие partition_spec.

  Если указать INTO, все вставляемые строки добавляются к существующим строкам.

• table_name

  Определяет таблицу для вставки. The name must not include a temporal specification. If the table cannot be found Azure Databricks raises a TABLE_OR_VIEW_NOT_FOUND error.

  table_name не может быть внешней таблицей.

  Applies to: Databricks Runtime 16.0 and above

  table_name may include an options specification.

• PARTITION пункт

  Необязательный параметр, указывающий целевую секцию для вставки. Можно также частично указать секцию.

  When specifying a static partition (column = value), this column must not be repeated in the insert column list.

  When specifying a dynamic partition for INSERT OVERWRITE, the table_name must be a Delta Lake table.

• ( column_name [, ...] )

  Необязательный список столбцов в таблице. Команда insert может указывать любой конкретный столбец из таблицы не более одного раза.

  Applies to: Databricks SQL Databricks Runtime 12.2 LTS and above

  • Если эта команда исключает столбец, Databricks SQL назначает соответствующее значение по умолчанию.
  • Если целевая схема таблицы не определяет значение по умолчанию для вставленного столбца, Databricks SQL назначает NULL, если столбец имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.

  Предоставление списка столбцов не эквивалентно указанию всех столбцов, за исключением назначенных значений в предложении PARTITION в порядке, определенном в таблице.

• BY NAME

  Applies to: Databricks SQL Databricks Runtime 13.3 LTS and above

  Если это предложение используется вместо явного списка столбцов, команда использует открытые имена столбцов query для создания списка столбцов в порядке query. Как и в явном списке столбцов, каждый столбец должен существовать в целевой таблице и не должен дублироваться. Если столбец, присутствующий в table_name, не является частью списка подразумеваемых столбцов, вместо этого используется значение DEFAULT.

  BY NAME также соответствует атрибутам структур по имени.

  Столбец в query не может соответствовать столбцу, указанному в предложении PARTITION или любом созданном столбце.

• ЗАМЕНИТЬ WHEREboolean_expression

  Applies to: Databricks SQL Databricks Runtime 12.2 LTS and above

  Если table_name является таблицей Delta Lake, удалите строки, соответствующие boolean_expression перед вставкой строк, соответствующих boolean-expression, указанных в query. Строки в query, которые не совпадают с boolean_expression, игнорируются.

  boolean_expression can only reference attributes from the table.

  См. произвольную выборочную перезапись с replaceWhere.

• REPLACE USING ( column_name [, ...] )

  Applies to: Databricks SQL Databricks Runtime 16.3 and above

  Атомарно удаляет строки из table_name этой строки в query указанных столбцах, а затем вставляет строки из query. Сопоставление основано на сравнении равенства указанных значений столбцов в таблице и query.

  Эта функция доступна в общедоступной предварительной версии и в настоящее время требует, чтобы указанные столбцы включали все столбцы секционирования таблицы.

  Note

  JOIN USING REPLACE USING Как и в случае с строками, использующими регулярное сравнение равенства, где NULL значения обрабатываются как не равные ни чему. Строки со значениями NULL в указанных столбцах не будут совпадать и поэтому не удаляются из целевой таблицы.

• query

  Запрос, создающий вставляемые строки.

  Количество столбцов, возвращаемых запросом, должно совпадать с указанным или подразумеваемым списком столбцов для вставки.

  Если тип данных нельзя безопасно привести к типу данных соответствующего столбца, выбрасывается исключение среды выполнения.

  Applies to: Databricks SQL Databricks Runtime 11.3 LTS and above

  • Если query состоит из VALUES предложения, тогда expression может быть DEFAULT.
  • Если query состоит из SELECT предложения, тогда named_expression может быть DEFAULT.
  • DEFAULT будет вставлять явно определенное выражение DEFAULT соответствующего столбца в table_name, или NULL, если ничего не определено.

  If schema evolution is enabled, new columns can exist as the last columns of your schema (or nested columns) for the schema to evolve.

• target_alias

  An optional table alias for the table for REPLACE ON. Псевдоним не должен содержать список столбцов.

• source_alias

  An optional query alias for the query for REPLACE ON. Псевдоним не должен содержать список столбцов.

• ЗАМЕНА BOOLEAN_EXPRESSION

  Applies to: Databricks Runtime 17.1 and above

  If table_name is a Delta Lake table, REPLACE ON atomically deletes any rows in the table that match the query rows based on the specified boolean_expression, then inserts the query rows. Unlike REPLACE WHERE’s boolean_expression, REPLACE ON’s boolean_expression can reference columns from both the table and the query. Если значение query пусто, удаление не выполняется, так как для сопоставления строк нет query .

Examples

В этом разделе рассматриваются следующие вопросы.

• INSERT В
• Вставка со списком столбцов
• Вставка как со спецификацией секции, так и списком столбцов
• INSERT использование оператора BY NAME
• ЗАМЕНЯТЬ WHERE
• REPLACE USING
• REPLACE ON
• INSERT ПЕРЕЗАПИСАТЬ

INSERT Внутрь

INSERT с помощью VALUES

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
  PARTITIONED BY (student_id);

-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);

-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);

-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);

--  Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
    ('Bob Brown', '456 Taylor St, Cupertino', 444444),
    ('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);

-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
    ('Gwyneth Zhao', '120 Main St, Rockport', 666666),
    ('Jackson Peterson', DEFAULT, 777777);

> SELECT * FROM students;
            name                  address student_id
 ---------------- ------------------------ ----------
        Amy Smith   123 Park Ave, San Jose     111111
   Grayson Miller                  unknown     222222
        Youna Kim                  unknown     333333
        Bob Brown 456 Taylor St, Cupertino     444444
    Cathy Johnson  789 Race Ave, Palo Alto     555555
     Gwyneth Zhao    120 Main St, Rockport     666666
 Jackson Peterson                  unknown     777777

Вставка с использованием подзапросов

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis   245 Market St, Milpitas 345678901

> INSERT INTO students PARTITION (student_id = 444444)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444

-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;

Вставка с использованием клаузу TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT INTO students TABLE visiting_students;

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith     123 Park Ave,San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888

Вставка в каталог

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT INTO delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Вставка со списком столбцов

> INSERT INTO students (address, name, student_id) VALUES
    ('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
      name                address student_id
 --------- ---------------------- ----------
 Kent Yao         Hangzhou, China   11215016

Вставка как со спецификацией партиции, так и со списком столбцов

> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
    ('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
         name                address student_id
 ------------ ---------------------- ----------
 Kent Yao Jr.        Hangzhou, China   11215017

INSERT используя конструкцию BY NAME.

> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
  0  data  {"a":1,"b":2}

> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
  0     [{"a":1,"b":2}]
  NULL  [{"a":1,"b":2}]

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
 Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS

ЗАМЕНА WHERE

> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
   (DATE'2022-10-01', 1234),
   (DATE'2022-10-02', 2345),
   (DATE'2022-10-03', 3456),
   (DATE'2022-11-01', 3214);

-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
   VALUES (DATE'2022-10-01', 1237),
          (DATE'2022-10-02', 2378),
          (DATE'2022-10-04', 2456),
          (DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-10-04   2456
 2022-10-05   6328
 2022-11-01   3214

REPLACE USING

> CREATE TABLE students (name STRING, country STRING) PARTITIONED BY (country);
> CREATE TABLE new_students (name STRING, country STRING);

> INSERT INTO students VALUES
    ('Dylan', 'US'),
    ('Doug', 'UK'),
    ('Julia', 'IT'),
    ('David', 'DE'),
    ('Liz', 'CN'),
    ('Adam', NULL);

> INSERT INTO new_students VALUES
    ('Peter', 'FR'),
    ('Jennie', 'UK'),
    ('Eva', NULL);

-- Replace any rows in `students` that have matching `country` values in `new_students`.
> INSERT INTO TABLE students
    REPLACE USING (country)
    SELECT * FROM new_students;

> SELECT * FROM students;
   name       country
  ------      -------
   Dylan           US
  Jennie           UK
   Julia           IT
   David           DE
     Liz           CN
   Peter           FR
    Adam         NULL
     Eva         NULL

REPLACE ON

> CREATE TABLE students (name STRING, row_origin STRING)
> CREATE TABLE people (name STRING, row_origin STRING)

> INSERT INTO students VALUES ('Alice', 'table'), (NULL, 'table'), ('Bob', 'table')
> INSERT INTO people VALUES ('Alice', 'query'), (NULL, 'query'), ('Delta', 'query')

> INSERT INTO TABLE students AS t
  REPLACE ON t.name <=> s.name
  (SELECT * FROM people) AS s

> SELECT * FROM students
  name        row_origin
 -----        ----------
 Alice             query
  NULL             query
   Bob             table
 Delta             query

INSERT ПЕРЕЗАПИСЬ

Вставка с использованием клаузу VALUES

-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888
   Helen Davis 469 Mission St, San Diego     999999
    Jason Wang     908 Bird St, Saratoga     121212

> INSERT OVERWRITE students VALUES
    ('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
    ('Brian Reed', '723 Kern Ave, Palo Alto', 222222);

> SELECT * FROM students;
       name                 address student_id
 ---------- ----------------------- ----------
 Ashua Hill 456 Erica Ct, Cupertino     111111
 Brian Reed 723 Kern Ave, Palo Alto     222222

Вставка с использованием подзапросов

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis    245 Market St,Milpitas 345678901

> INSERT OVERWRITE students PARTITION (student_id = 222222)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
    Ashua Hill   456 Erica Ct, Cupertino     111111
 Dora Williams 134 Forest Ave, Melo Park     222222

Вставка с использованием клаузу TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT OVERWRITE students TABLE visiting_students;

> SELECT * FROM students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

Вставка перезаписи каталога

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Related articles

• общее табличное выражение
• COPY
• DELETE
• MERGE
• PARTITION
• query
• UPDATE