Заметка
Доступ к этой странице требует авторизации. Вы можете попробовать войти в систему или изменить каталог.
Доступ к этой странице требует авторизации. Вы можете попробовать сменить директорию.
Область применения:
Databricks SQL
Databricks Runtime
Вставляет новые строки в таблицу и при необходимости усекает таблицу или ее разделы. Вставляемые строки указываются по выражениям значений или результату запроса.
Databricks не поддерживает INSERT таблицы Hive Avro , если timestamp-millis тип присутствует в схеме таблицы.
Syntax
[ common_table_expression ]
INSERT { OVERWRITE | INTO } [ TABLE ] table_name
[ PARTITION clause ]
[ ( column_name [, ...] ) | BY NAME ]
query
[ common_table_expression ]
INSERT INTO [ TABLE ] table_name
[ REPLACE WHERE predicate | REPLACE USING ( column_name [, ...] ) ]
query
[ common_table_expression ]
INSERT INTO [ TABLE ] table_name [target_alias]
REPLACE ON boolean_expression
{ (query) [source_alias] | query }
Note
При выполнении INSERT INTO таблицы Delta поддерживается проверка схемы и её эволюция.
Если тип данных столбца нельзя безопасно привести к типу данных таблицы Delta, создается исключение среды выполнения.
Если включена эволюция схемы , новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.
Parameters
-
Распространенные табличные выражения (CTE) — это один или несколько именованных запросов, которые можно повторно использовать несколько раз в основном блоке запросов, чтобы избежать повторяющихся вычислений или улучшить удобочитаемость сложных вложенных запросов.
INTOилиOVERWRITEПри указании
OVERWRITEприменяется следующее:- Без
partition_specтаблица усечена перед вставкой первой строки. - В противном случае перед вставкой первой строки усекаются все разделы, соответствующие
partition_spec.
Если указать
INTO, все вставляемые строки добавляются к существующим строкам.- Без
-
Определяет таблицу для вставки. Имя не должно содержать временную спецификацию. Если таблица не найдена, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.
table_nameне может быть внешней таблицей.Область применения:
Databricks Runtime 16.0 и более поздней версииtable_nameможет включать спецификацию параметров. -
Необязательный параметр, указывающий целевую секцию для вставки. Можно также частично указать секцию.
При указании статического раздела (
column = value) этот столбец не должен повторяться в списке вставок столбцов.При указании динамической секции для
INSERT OVERWRITEнееtable_nameдолжна быть таблица Delta Lake. ( column_name [, ...] )
Необязательный список столбцов в таблице. Команда insert может указывать любой конкретный столбец из таблицы не более одного раза.
Область применения:
проверка Databricks SQL
Databricks Runtime 12.2 LTS и выше- Если эта команда исключает столбец, Databricks SQL назначает соответствующее значение по умолчанию.
- Если целевая схема таблицы не определяет значение по умолчанию для вставленного столбца, Databricks SQL назначает
NULL, если столбец имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.
Предоставление списка столбцов не эквивалентно указанию всех столбцов, за исключением назначенных значений в предложении
PARTITIONв порядке, определенном в таблице.BY NAMEПрименяется к:
Databricks SQL
Databricks Runtime 13.3 LTS и вышеЕсли это предложение используется вместо явного списка столбцов, команда использует открытые имена столбцов
queryдля создания списка столбцов в порядкеquery. Как и в явном списке столбцов, каждый столбец должен существовать в целевой таблице и не должен дублироваться. Если столбец, присутствующий вtable_name, не является частью списка подразумеваемых столбцов, вместо этого используется значениеDEFAULT.BY NAMEтакже соответствует атрибутам структур по имени.Столбец в
queryне может соответствовать столбцу, указанному в предложенииPARTITIONили любом созданном столбце.ЗАМЕНИТЬ WHEREboolean_expression
Область применения:
проверка Databricks SQL
Databricks Runtime 12.2 LTS и вышеЕсли
table_nameявляется таблицей Delta Lake, удалите строки, соответствующиеboolean_expressionперед вставкой строк, соответствующихboolean-expression, указанных вquery. Строки вquery, которые не совпадают сboolean_expression, игнорируются.boolean_expression может ссылаться только на атрибуты из таблицы.
Замени с использованием ( column_name [, ...] )
Применяется к:
Databricks SQL
Databricks Runtime 16.3 и более поздних версийАтомарно удаляет строки из
table_name, соответствующие строкам вqueryпо указанным столбцам, а затем вставляет строки изquery. Сопоставление основано на сравнении равенства указанных значений столбцов в таблице иquery.Для Databricks Runtime 16.3–17.1 эта функция требует, чтобы указанные столбцы включали все столбцы секционирования таблицы.
Note
JOIN USINGПохож наJOIN USING,NULLсопоставляет строки, используя регулярное сравнение равенства, где значения рассматриваются как не равные ни чему. Строки со значениямиNULLв указанных столбцах не будут совпадать и поэтому не удаляются из целевой таблицы.-
Запрос, создающий вставляемые строки.
Количество столбцов, возвращаемых запросом, должно совпадать с указанным или подразумеваемым списком столбцов для вставки.
Если тип данных нельзя безопасно привести к типу данных соответствующего столбца, выбрасывается исключение среды выполнения.
Область применения:
Databricks SQL
Databricks Runtime 11.3 LTS и выше- Если
queryсостоит из VALUES предложения, тогдаexpressionможет бытьDEFAULT. - Если
queryсостоит из SELECT предложения, тогдаnamed_expressionможет бытьDEFAULT. -
DEFAULTбудет вставлять явно определенное выражениеDEFAULTсоответствующего столбца вtable_name, илиNULL, если ничего не определено.
Если включена эволюция схемы , новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.
- Если
-
Необязательный псевдоним таблицы для таблицы
REPLACE ON. Псевдоним не должен содержать список столбцов. -
Необязательный псевдоним запроса для
query.REPLACE ONПсевдоним не должен содержать список столбцов. ЗАМЕНА НА BOOLEAN_EXPRESSION
Применяется к:
Databricks SQL
Databricks Runtime 17.1 и более поздних версийЕсли
table_nameэто таблица Delta Lake,REPLACE ONатомарно удаляет все строки в таблице, соответствующиеqueryстрокам на основе указанного boolean_expression, а затем вставляетqueryстроки. В отличие отREPLACE WHEREboolean_expression,REPLACE ONboolean_expression может ссылаться на столбцы из таблицы и таблицыquery. Еслиqueryпуст, удаления не выполняются, так как нет строкqueryдля сопоставления.
Examples
В этом разделе рассматриваются следующие вопросы.
- INSERT В
- Вставка со списком столбцов
- Вставка как со спецификацией секции, так и списком столбцов
- INSERT использование оператора BY NAME
- ЗАМЕНЯТЬ WHERE
- ЗАМЕНА С ПОМОЩЬЮ
- ЗАМЕНА В
- INSERT ПЕРЕЗАПИСАТЬ
INSERT Внутрь
INSERT с помощью VALUES
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
PARTITIONED BY (student_id);
-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);
-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);
-- Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
('Bob Brown', '456 Taylor St, Cupertino', 444444),
('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);
-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
('Gwyneth Zhao', '120 Main St, Rockport', 666666),
('Jackson Peterson', DEFAULT, 777777);
> SELECT * FROM students;
name address student_id
---------------- ------------------------ ----------
Amy Smith 123 Park Ave, San Jose 111111
Grayson Miller unknown 222222
Youna Kim unknown 333333
Bob Brown 456 Taylor St, Cupertino 444444
Cathy Johnson 789 Race Ave, Palo Alto 555555
Gwyneth Zhao 120 Main St, Rockport 666666
Jackson Peterson unknown 777777
Вставка с использованием подзапросов
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St, Milpitas 345678901
> INSERT INTO students PARTITION (student_id = 444444)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;
Вставка с использованием клаузу TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT INTO students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave,San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Вставка в каталог
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT INTO delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Вставка со списком столбцов
> INSERT INTO students (address, name, student_id) VALUES
('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
name address student_id
--------- ---------------------- ----------
Kent Yao Hangzhou, China 11215016
Вставка как со спецификацией партиции, так и со списком столбцов
> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
name address student_id
------------ ---------------------- ----------
Kent Yao Jr. Hangzhou, China 11215017
INSERT используя конструкцию BY NAME.
> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
0 data {"a":1,"b":2}
> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
0 [{"a":1,"b":2}]
NULL [{"a":1,"b":2}]
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS
ЗАМЕНА WHERE
> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
(DATE'2022-10-01', 1234),
(DATE'2022-10-02', 2345),
(DATE'2022-10-03', 3456),
(DATE'2022-11-01', 3214);
-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
VALUES (DATE'2022-10-01', 1237),
(DATE'2022-10-02', 2378),
(DATE'2022-10-04', 2456),
(DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY tx_date;
tx_date amount
---------- ------
2022-10-01 1237
2022-10-02 2378
2022-10-04 2456
2022-10-05 6328
2022-11-01 3214
ЗАМЕНА С ПОМОЩЬЮ
> CREATE TABLE students (name STRING, country STRING) PARTITIONED BY (country);
> CREATE TABLE new_students (name STRING, country STRING);
> INSERT INTO students VALUES
('Dylan', 'US'),
('Doug', 'UK'),
('Julia', 'IT'),
('David', 'DE'),
('Liz', 'CN'),
('Adam', NULL);
> INSERT INTO new_students VALUES
('Peter', 'FR'),
('Jennie', 'UK'),
('Eva', NULL);
-- Replace any rows in `students` that have matching `country` values in `new_students`.
> INSERT INTO TABLE students
REPLACE USING (country)
SELECT * FROM new_students;
> SELECT * FROM students;
name country
------ -------
Dylan US
Jennie UK
Julia IT
David DE
Liz CN
Peter FR
Adam NULL
Eva NULL
ЗАМЕНА В
> CREATE TABLE students (name STRING, row_origin STRING)
> CREATE TABLE people (name STRING, row_origin STRING)
> INSERT INTO students VALUES ('Alice', 'table'), (NULL, 'table'), ('Bob', 'table')
> INSERT INTO people VALUES ('Alice', 'query'), (NULL, 'query'), ('Delta', 'query')
> INSERT INTO TABLE students AS t
REPLACE ON t.name <=> s.name
(SELECT * FROM people) AS s
> SELECT * FROM students
name row_origin
----- ----------
Alice query
NULL query
Bob table
Delta query
INSERT ПЕРЕЗАПИСЬ
Вставка с использованием клаузу VALUES
-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Helen Davis 469 Mission St, San Diego 999999
Jason Wang 908 Bird St, Saratoga 121212
> INSERT OVERWRITE students VALUES
('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
('Brian Reed', '723 Kern Ave, Palo Alto', 222222);
> SELECT * FROM students;
name address student_id
---------- ----------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Brian Reed 723 Kern Ave, Palo Alto 222222
Вставка с использованием подзапросов
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St,Milpitas 345678901
> INSERT OVERWRITE students PARTITION (student_id = 222222)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Dora Williams 134 Forest Ave, Melo Park 222222
Вставка с использованием клаузу TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT OVERWRITE students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Вставка перезаписи каталога
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111