Поделиться через


INSERT

Область применения:отмечено Databricks SQL отмечено Databricks Runtime

Вставляет новые строки в таблицу и при необходимости усекает таблицу или ее разделы. Вставляемые строки указываются по выражениям значений или результату запроса.

Databricks не поддерживает INSERT таблицы Hive Avro , если timestamp-millis тип присутствует в схеме таблицы.

Syntax

[ common_table_expression ]
  INSERT { OVERWRITE | INTO } [ TABLE ] table_name
    [ PARTITION clause ]
    [ ( column_name [, ...] ) | BY NAME ]
    query

[ common_table_expression ]
  INSERT INTO [ TABLE ] table_name
    [ REPLACE WHERE predicate | REPLACE USING ( column_name [, ...] ) ]
    query

[ common_table_expression ]
  INSERT INTO [ TABLE ] table_name [target_alias]
    REPLACE ON boolean_expression
    { (query) [source_alias] | query }

Note

При выполнении INSERT INTO таблицы Delta поддерживается проверка схемы и её эволюция. Если тип данных столбца нельзя безопасно привести к типу данных таблицы Delta, создается исключение среды выполнения. Если включена эволюция схемы , новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.

Parameters

  • общее табличное выражение

    Распространенные табличные выражения (CTE) — это один или несколько именованных запросов, которые можно повторно использовать несколько раз в основном блоке запросов, чтобы избежать повторяющихся вычислений или улучшить удобочитаемость сложных вложенных запросов.

  • INTO или OVERWRITE

    При указании OVERWRITE применяется следующее:

    • Без partition_spec таблица усечена перед вставкой первой строки.
    • В противном случае перед вставкой первой строки усекаются все разделы, соответствующие partition_spec.

    Если указать INTO, все вставляемые строки добавляются к существующим строкам.

  • table_name

    Определяет таблицу для вставки. Имя не должно содержать временную спецификацию. Если таблица не найдена, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.

    table_name не может быть внешней таблицей.

    Область применения:check помечена да Databricks Runtime 16.0 и более поздней версии

    table_name может включать спецификацию параметров.

  • PARTITION пункт

    Необязательный параметр, указывающий целевую секцию для вставки. Можно также частично указать секцию.

    При указании статического раздела (column = value) этот столбец не должен повторяться в списке вставок столбцов.

    При указании динамической секции для INSERT OVERWRITEнее table_name должна быть таблица Delta Lake.

  • ( column_name [, ...] )

    Необязательный список столбцов в таблице. Команда insert может указывать любой конкретный столбец из таблицы не более одного раза.

    Область применения:check помечена да проверка Databricks SQL помечена да Databricks Runtime 12.2 LTS и выше

    • Если эта команда исключает столбец, Databricks SQL назначает соответствующее значение по умолчанию.
    • Если целевая схема таблицы не определяет значение по умолчанию для вставленного столбца, Databricks SQL назначает NULL, если столбец имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.

    Предоставление списка столбцов не эквивалентно указанию всех столбцов, за исключением назначенных значений в предложении PARTITION в порядке, определенном в таблице.

  • BY NAME

    Применяется к:Отмечено галочкой: Да Databricks SQL Отмечено галочкой: Да Databricks Runtime 13.3 LTS и выше

    Если это предложение используется вместо явного списка столбцов, команда использует открытые имена столбцов query для создания списка столбцов в порядке query. Как и в явном списке столбцов, каждый столбец должен существовать в целевой таблице и не должен дублироваться. Если столбец, присутствующий в table_name, не является частью списка подразумеваемых столбцов, вместо этого используется значение DEFAULT.

    BY NAME также соответствует атрибутам структур по имени.

    Столбец в query не может соответствовать столбцу, указанному в предложении PARTITION или любом созданном столбце.

  • ЗАМЕНИТЬ WHEREboolean_expression

    Область применения:check помечена да проверка Databricks SQL помечена да Databricks Runtime 12.2 LTS и выше

    Если table_name является таблицей Delta Lake, удалите строки, соответствующие boolean_expression перед вставкой строк, соответствующих boolean-expression, указанных в query. Строки в query, которые не совпадают с boolean_expression, игнорируются.

    boolean_expression может ссылаться только на атрибуты из таблицы.

    См. произвольную выборочную перезапись с replaceWhere.

  • Замени с использованием ( column_name [, ...] )

    Применяется к:отмечено галочкой Databricks SQL отмечено галочкой Databricks Runtime 16.3 и более поздних версий

    Атомарно удаляет строки из table_name, соответствующие строкам в query по указанным столбцам, а затем вставляет строки из query. Сопоставление основано на сравнении равенства указанных значений столбцов в таблице и query.

    Для Databricks Runtime 16.3–17.1 эта функция требует, чтобы указанные столбцы включали все столбцы секционирования таблицы.

    Note

    JOIN USING Похож на JOIN USING, NULL сопоставляет строки, используя регулярное сравнение равенства, где значения рассматриваются как не равные ни чему. Строки со значениями NULL в указанных столбцах не будут совпадать и поэтому не удаляются из целевой таблицы.

  • query

    Запрос, создающий вставляемые строки.

    Количество столбцов, возвращаемых запросом, должно совпадать с указанным или подразумеваемым списком столбцов для вставки.

    Если тип данных нельзя безопасно привести к типу данных соответствующего столбца, выбрасывается исключение среды выполнения.

    Область применения:отмечено как да Databricks SQL отмечено как да Databricks Runtime 11.3 LTS и выше

    • Если query состоит из VALUES предложения, тогда expression может быть DEFAULT.
    • Если query состоит из SELECT предложения, тогда named_expression может быть DEFAULT.
    • DEFAULT будет вставлять явно определенное выражение DEFAULT соответствующего столбца в table_name, или NULL, если ничего не определено.

    Если включена эволюция схемы , новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.

  • target_alias

    Необязательный псевдоним таблицы для таблицы REPLACE ON. Псевдоним не должен содержать список столбцов.

  • source_alias

    Необязательный псевдоним запроса для query .REPLACE ON Псевдоним не должен содержать список столбцов.

  • ЗАМЕНА НА BOOLEAN_EXPRESSION

    Применяется к:check помеченный да флажок Databricks SQL помечен да Databricks Runtime 17.1 и более поздних версий

    Если table_name это таблица Delta Lake, REPLACE ON атомарно удаляет все строки в таблице, соответствующие query строкам на основе указанного boolean_expression, а затем вставляет query строки. В отличие от REPLACE WHEREboolean_expression, REPLACE ONboolean_expression может ссылаться на столбцы из таблицы и таблицыquery. Если query пуст, удаления не выполняются, так как нет строк query для сопоставления.

Examples

В этом разделе рассматриваются следующие вопросы.

INSERT Внутрь

INSERT с помощью VALUES

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
  PARTITIONED BY (student_id);

-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);

-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);

-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);

--  Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
    ('Bob Brown', '456 Taylor St, Cupertino', 444444),
    ('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);

-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
    ('Gwyneth Zhao', '120 Main St, Rockport', 666666),
    ('Jackson Peterson', DEFAULT, 777777);

> SELECT * FROM students;
            name                  address student_id
 ---------------- ------------------------ ----------
        Amy Smith   123 Park Ave, San Jose     111111
   Grayson Miller                  unknown     222222
        Youna Kim                  unknown     333333
        Bob Brown 456 Taylor St, Cupertino     444444
    Cathy Johnson  789 Race Ave, Palo Alto     555555
     Gwyneth Zhao    120 Main St, Rockport     666666
 Jackson Peterson                  unknown     777777

Вставка с использованием подзапросов

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis   245 Market St, Milpitas 345678901

> INSERT INTO students PARTITION (student_id = 444444)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444

-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;

Вставка с использованием клаузу TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT INTO students TABLE visiting_students;

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith     123 Park Ave,San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888

Вставка в каталог

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT INTO delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Вставка со списком столбцов

> INSERT INTO students (address, name, student_id) VALUES
    ('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
      name                address student_id
 --------- ---------------------- ----------
 Kent Yao         Hangzhou, China   11215016

Вставка как со спецификацией партиции, так и со списком столбцов

> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
    ('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
         name                address student_id
 ------------ ---------------------- ----------
 Kent Yao Jr.        Hangzhou, China   11215017

INSERT используя конструкцию BY NAME.

> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
  0  data  {"a":1,"b":2}

> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
  0     [{"a":1,"b":2}]
  NULL  [{"a":1,"b":2}]

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
 Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS

ЗАМЕНА WHERE

> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
   (DATE'2022-10-01', 1234),
   (DATE'2022-10-02', 2345),
   (DATE'2022-10-03', 3456),
   (DATE'2022-11-01', 3214);

-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
   VALUES (DATE'2022-10-01', 1237),
          (DATE'2022-10-02', 2378),
          (DATE'2022-10-04', 2456),
          (DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-10-04   2456
 2022-10-05   6328
 2022-11-01   3214

ЗАМЕНА С ПОМОЩЬЮ

> CREATE TABLE students (name STRING, country STRING) PARTITIONED BY (country);
> CREATE TABLE new_students (name STRING, country STRING);

> INSERT INTO students VALUES
    ('Dylan', 'US'),
    ('Doug', 'UK'),
    ('Julia', 'IT'),
    ('David', 'DE'),
    ('Liz', 'CN'),
    ('Adam', NULL);

> INSERT INTO new_students VALUES
    ('Peter', 'FR'),
    ('Jennie', 'UK'),
    ('Eva', NULL);

-- Replace any rows in `students` that have matching `country` values in `new_students`.
> INSERT INTO TABLE students
    REPLACE USING (country)
    SELECT * FROM new_students;

> SELECT * FROM students;
   name       country
  ------      -------
   Dylan           US
  Jennie           UK
   Julia           IT
   David           DE
     Liz           CN
   Peter           FR
    Adam         NULL
     Eva         NULL

ЗАМЕНА В

> CREATE TABLE students (name STRING, row_origin STRING)
> CREATE TABLE people (name STRING, row_origin STRING)

> INSERT INTO students VALUES ('Alice', 'table'), (NULL, 'table'), ('Bob', 'table')
> INSERT INTO people VALUES ('Alice', 'query'), (NULL, 'query'), ('Delta', 'query')

> INSERT INTO TABLE students AS t
  REPLACE ON t.name <=> s.name
  (SELECT * FROM people) AS s

> SELECT * FROM students
  name        row_origin
 -----        ----------
 Alice             query
  NULL             query
   Bob             table
 Delta             query

INSERT ПЕРЕЗАПИСЬ

Вставка с использованием клаузу VALUES

-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888
   Helen Davis 469 Mission St, San Diego     999999
    Jason Wang     908 Bird St, Saratoga     121212

> INSERT OVERWRITE students VALUES
    ('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
    ('Brian Reed', '723 Kern Ave, Palo Alto', 222222);

> SELECT * FROM students;
       name                 address student_id
 ---------- ----------------------- ----------
 Ashua Hill 456 Erica Ct, Cupertino     111111
 Brian Reed 723 Kern Ave, Palo Alto     222222

Вставка с использованием подзапросов

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis    245 Market St,Milpitas 345678901

> INSERT OVERWRITE students PARTITION (student_id = 222222)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
    Ashua Hill   456 Erica Ct, Cupertino     111111
 Dora Williams 134 Forest Ave, Melo Park     222222

Вставка с использованием клаузу TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT OVERWRITE students TABLE visiting_students;

> SELECT * FROM students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

Вставка перезаписи каталога

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111