INSERT

Berlaku untuk: Databricks SQL Databricks Runtime

Menyisipkan baris baru ke dalam tabel dan secara opsional memotong tabel atau partisi. Anda menentukan baris yang disisipkan menurut ekspresi nilai atau hasil kueri.

Databricks tidak mendukung INSERT tabel Apache Hive Avro jika timestamp-millis jenisnya ada dalam skema tabel.

Syntax

[ common_table_expression ]
  INSERT [ WITH SCHEMA EVOLUTION ] { OVERWRITE | INTO } [ TABLE ] table_name
    [ PARTITION clause ]
    [ ( column_name [, ...] ) | BY NAME ]
    query

[ common_table_expression ]
  INSERT [ WITH SCHEMA EVOLUTION ] INTO [ TABLE ] table_name
    [ BY NAME ]
    [ REPLACE WHERE predicate | REPLACE USING ( column_name [, ...] ) ]
    query

[ common_table_expression ]
  INSERT [ WITH SCHEMA EVOLUTION ] INTO [ TABLE ] table_name [target_alias]
    [ BY NAME ]
    REPLACE ON boolean_expression
    { (query) [source_alias] | query }

Note

Saat Anda INSERT INTO tabel Delta, penerapan dan pengembangan skema didukung. Jika jenis data kolom tidak dapat diubah dengan aman ke jenis data tabel Delta, maka akan memicu pengecualian runtime. Jika evolusi skema diaktifkan, kolom baru dapat ada sebagai kolom terakhir skema Anda (atau kolom berlapis) agar skema berevolusi.

Parameters

• ekspresi tabel umum

  Ekspresi tabel umum (CTE) adalah satu atau beberapa kueri bernama yang dapat digunakan kembali beberapa kali dalam blok kueri utama untuk menghindari komputasi berulang atau untuk meningkatkan keterbacaan kueri berlapis yang kompleks.

• WITH SCHEMA EVOLUTION

  Berlaku untuk: Databricks Runtime 18.1 ke atas

  Mengaktifkan skema evolusi otomatis untuk operasi ini. Saat diaktifkan, skema tabel Delta Lake target diperbarui secara otomatis untuk mengakomodasi kolom tambahan atau jenis kueri sumber yang diperluas. Untuk daftar perubahan jenis yang didukung, lihat Perubahan jenis yang didukung.

• INTO atau OVERWRITE

  Jika Anda menentukan OVERWRITE, hal berikut berlaku:

  • Tanpa partition_spec tabel dipangkas sebelum memasukkan baris pertama.
  • Jika tidak, semua partisi yang cocok dengan partition_spec dipotong sebelum memasukkan baris pertama.

  Jika Anda menentukan INTO, semua baris yang disisipkan merupakan tambahan untuk baris yang ada.

• table_name

  Mengidentifikasi tabel ke mana data akan disisipkan. Nama tidak boleh menyertakan spesifikasi temporal. Jika tabel tidak dapat ditemukan, Azure Databricks menimbulkan kesalahan TABLE_OR_VIEW_NOT_FOUND.

  table_name tidak boleh menjadi tabel asing.

  Berlaku untuk: Databricks Runtime 16.0 ke atas

  table_name dapat mencakup spesifikasi opsi.

• PARTITION Klausul

  Parameter opsional yang menentukan partisi target untuk penyisipan. Anda juga hanya dapat menentukan partisi secara parsial.

  Saat menentukan partisi statis (column = value), kolom ini tidak boleh diulang dalam daftar sisipkan kolom.

  Saat menentukan partisi dinamis untuk INSERT OVERWRITE, table_name harus tabel Delta Lake.

• ( column_name [, ...] )

  Daftar kolom opsional dalam tabel. Perintah insert hanya dapat menentukan kolom tertentu dari tabel sekali.

  Berlaku untuk: pemeriksaan Databricks SQL Databricks Runtime 12.2 LTS ke atas

  • Jika perintah ini menghilangkan kolom, Databricks SQL menetapkan nilai default yang sesuai sebagai gantinya.
  • Jika skema tabel target tidak menentukan nilai default apa pun untuk kolom yang disisipkan, Databricks SQL menetapkan NULL jika kolom dapat bernilai null. Jika tidak, SQL Databricks menimbulkan kesalahan.

  Tidak menyertakan daftar kolom setara dengan menentukan semua kolom, kecuali yang memiliki nilai yang ditetapkan dalam klausa PARTITION, dalam urutan tabel yang ditentukan.

• BY NAME

  Berlaku untuk: Databricks SQL Databricks Runtime 13.3 LTS ke atas

  Ketika klausa ini digunakan alih-alih daftar kolom eksplisit, perintah menggunakan nama kolom query yang diekspos untuk menghasilkan daftar kolom dalam urutan query. Seperti halnya daftar kolom eksplisit, setiap kolom harus ada dalam tabel target, dan tidak boleh diduplikasi. Jika kolom yang ada di table_name bukan bagian dari daftar kolom tersirat, nilai DEFAULT digunakan sebagai gantinya.

  BY NAME cocok dengan kolom tingkat atas berdasarkan nama. Untuk bidang struktur berlapis, resolusi adalah berdasarkan nama pada tabel Parquet (dan non-Delta lainnya) dan berdasarkan posisi pada tabel Delta Lake Lake. Untuk tabel Delta Lake, pastikan urutan bidang struktur kueri cocok dengan target. Misalnya, gunakan named_struct('a', 1, 'b', 2) untuk kolom STRUCT<a INT, b INT>.

  Tidak ada kolom di query yang mungkin cocok dengan kolom yang ditentukan dalam klausa PARTITION atau kolom apa pun yang dihasilkan.

• GANTI WHEREboolean_expression

  Berlaku untuk: pemeriksaan Databricks SQL Databricks Runtime 12.2 LTS ke atas Delta Lake saja

  Hapus baris yang cocok boolean_expression sebelum menyisipkan baris apa pun yang cocok boolean-expression yang ditentukan dalam query. Baris dalam query yang tidak cocok boolean_expression diabaikan.

  table_name harus mengidentifikasi tabel Delta Lake

  boolean_expression hanya dapat mereferensikan atribut dari tabel.

  boolean_expression adalah ekspresi yang harus mengembalikan BOOLEAN. Ekspresi mungkin berisi operator, nilai, dan fungsi berikut:

  • AND, OR, dan NOT
  • IN dengan nilai harfiah
  • =, <=>, >, <, >=, dan <=
  • TRUE dan FALSE
  • Functions startsWith, endsWith, contains
  • IS NULL dan IS NOT NULL

  boolean_expression Jika tidak valid, Databricks menimbulkan kesalahan DELTA_REPLACE_WHERE_MISMATCH.

  Lihat Penggantian selektif tak teratur dengan replaceWhere.

• GANTI MENGGUNAKAN ( column_name [, ...] )

  Berlaku untuk: Databricks SQL Databricks Runtime 16.3 ke atas

  Secara atom menghapus baris dari table_name yang cocok dengan baris di query pada kolom yang ditentukan, lalu menyisipkan baris dari query. Pencocokan didasarkan pada perbandingan kesetaraan dari nilai kolom yang ditentukan dalam tabel dan query.

  Untuk Databricks Runtime 16.3 hingga 17.1, fitur ini mengharuskan kolom yang ditentukan menyertakan semua kolom partisi tabel.

  BY NAME dukungan untuk REPLACE USING berlaku untuk Databricks Runtime 18.1 ke atas.

  Note

  Mirip dengan JOIN USING, REPLACE USING mencocokkan baris menggunakan perbandingan kesetaraan standar, di mana nilai NULL dianggap tidak setara dengan apa pun. Baris dengan NULL nilai dalam kolom yang ditentukan tidak akan cocok dan oleh karena itu tidak dihapus dari tabel target.

• query

  Kueri yang menghasilkan baris yang akan disisipkan.

  Anda harus mencocokkan jumlah kolom yang dikembalikan oleh kueri dengan daftar sisipkan kolom yang ditentukan atau tersirat.

  Jika jenis data tidak dapat dikonversi dengan aman ke jenis data kolom yang cocok, pengecualian runtime akan muncul.

  Berlaku untuk: Databricks SQL Databricks Runtime 11.3 LTS ke atas

  • Jika query terdiri dari klausa VALUES, maka expression dapat menjadi DEFAULT.
  • Jika query terdiri dari klausa SELECT, maka named_expression dapat menjadi DEFAULT.
  • DEFAULT akan menyisipkan ekspresi DEFAULT yang ditentukan secara eksplisit dari kolom terkait di table_name, atau NULL jika tidak ada yang ditentukan.

  Jika evolusi skema diaktifkan, kolom baru dapat ada sebagai kolom terakhir skema Anda (atau kolom berlapis) agar skema berevolusi.

• target_alias

  Alias tabel opsional untuk tabel untuk REPLACE ON. Alias seharusnya tidak menyertakan daftar kolom.

• source_alias

  Alias kueri opsional untuk query untuk REPLACE ON. Alias seharusnya tidak menyertakan daftar kolom.

• GANTI PADA boolean_expression

  Berlaku untuk: pemeriksaan Databricks SQL Databricks Runtime 17.1 ke atas

  Jika table_name adalah tabel Delta Lake, REPLACE ON secara atomik menghapus baris apa pun dalam tabel yang cocok query dengan baris berdasarkan boolean_expression yang ditentukan, lalu menyisipkan query baris. Tidak seperti REPLACE WHEREboolean_expression, REPLACE ONboolean_expression dapat mereferensikan kolom dari tabel dan query. Jika query kosong, tidak ada penghapusan yang dilakukan karena tidak ada baris query yang cocok.

  BY NAME dukungan untuk REPLACE ON berlaku untuk Databricks Runtime 18.1 ke atas.

Examples

Di bagian ini:

• INSERT KE
• Sisipkan dengan daftar kolom
• Sisipkan dengan spesifikasi partisi dan daftar kolom
• INSERT menggunakan klausa BY NAME
• MENGGANTI WHERE
• GANTI MENGGUNAKAN
• GANTI AKTIF
• INSERT MENIMPA
• DENGAN SCHEMA EVOLUSI

INSERT KE

INSERT menggunakan VALUES

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
  PARTITIONED BY (student_id);

-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);

-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);

-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);

--  Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
    ('Bob Brown', '456 Taylor St, Cupertino', 444444),
    ('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);

-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
    ('Gwyneth Zhao', '120 Main St, Rockport', 666666),
    ('Jackson Peterson', DEFAULT, 777777);

> SELECT * FROM students;
            name                  address student_id
 ---------------- ------------------------ ----------
        Amy Smith   123 Park Ave, San Jose     111111
   Grayson Miller                  unknown     222222
        Youna Kim                  unknown     333333
        Bob Brown 456 Taylor St, Cupertino     444444
    Cathy Johnson  789 Race Ave, Palo Alto     555555
     Gwyneth Zhao    120 Main St, Rockport     666666
 Jackson Peterson                  unknown     777777

Menyisipkan menggunakan subkueri

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis   245 Market St, Milpitas 345678901

> INSERT INTO students PARTITION (student_id = 444444)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444

-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;

Menyisipkan menggunakan klausa TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT INTO students TABLE visiting_students;

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith     123 Park Ave,San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888

Sisipkan ke dalam direktori

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT INTO delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Sisipkan dengan daftar kolom

> INSERT INTO students (address, name, student_id) VALUES
    ('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
      name                address student_id
 --------- ---------------------- ----------
 Kent Yao         Hangzhou, China   11215016

Sisipkan dengan spesifikasi partisi dan daftar kolom

> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
    ('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
         name                address student_id
 ------------ ---------------------- ----------
 Kent Yao Jr.        Hangzhou, China   11215017

INSERT menggunakan klausa BY NAME

Contoh berikut menggunakan tabel Delta Lake. Untuk Delta, bidang struct berlapis dicocokkan berdasarkan posisi, sehingga urutan bidang struct dalam kueri cocok dengan skema target (STRUCT<a INT, b INT>). Pada Parquet dan tabel non-Delta lainnya, bidang struct dicocokkan berdasarkan nama sebagai gantinya.

> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('a', 1, 'b', 2) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
  0  data  {"a":1,"b":2}

> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('a', 1, 'b', 2)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('a', 1, 'b', 2)) AS arr;
> SELECT * FROM target;
  0     [{"a":1,"b":2}]
  NULL  [{"a":1,"b":2}]

> INSERT INTO target BY NAME SELECT array(named_struct('a', 1, 'b', 2)) AS arr, 0 AS badname;
Error

> INSERT INTO target BY NAME SELECT array(named_struct('a', 1, 'b', 2)) AS arr, 0 AS n, 1 AS n;
 Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS

GANTI WHERE

> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
   (DATE'2022-10-01', 1234),
   (DATE'2022-10-02', 2345),
   (DATE'2022-10-03', 3456),
   (DATE'2022-11-01', 3214);

-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
   VALUES (DATE'2022-10-01', 1237),
          (DATE'2022-10-02', 2378),
          (DATE'2022-10-04', 2456),
          (DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-10-04   2456
 2022-10-05   6328
 2022-11-01   3214

-- Replace any rows with a transaction date in October 2022, matching columns by name.
> INSERT INTO sales BY NAME
  REPLACE WHERE
    tx_date BETWEEN '2022-10-01' AND '2022-10-31'
  SELECT
    *
  FROM
    (
      (
        VALUES (1237, DATE '2022-10-01'),
               (2378, DATE '2022-10-02')
      ) as (amount, tx_date)
    );
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-11-01   3214

GANTI MENGGUNAKAN

> CREATE TABLE students (name STRING, country STRING) PARTITIONED BY (country);
> CREATE TABLE new_students (name STRING, country STRING);

> INSERT INTO students VALUES
    ('Dylan', 'US'),
    ('Doug', 'UK'),
    ('Julia', 'IT'),
    ('David', 'DE'),
    ('Liz', 'CN'),
    ('Adam', NULL);

> INSERT INTO new_students VALUES
    ('Peter', 'FR'),
    ('Jennie', 'UK'),
    ('Eva', NULL);

-- Replace any rows in `students` that have matching `country` values in `new_students`.
> INSERT INTO TABLE students
    REPLACE USING (country)
    SELECT * FROM new_students;

> SELECT * FROM students;
   name       country
  ------      -------
   Dylan           US
  Jennie           UK
   Julia           IT
   David           DE
     Liz           CN
   Peter           FR
    Adam         NULL
     Eva         NULL

-- Replace any rows in `students` that have matching `country` values, while inserting columns by name instead of by position.
> INSERT INTO TABLE students BY NAME
  REPLACE USING (country)
  SELECT * FROM (VALUES
    ('US', 'Sophie'),
    ('UK', 'Oliver'),
    ('JP', 'Yuki')) AS t(country, name);
> SELECT * FROM students;
  name       country
 ------      -------
 Sophie           US
 Oliver           UK
  Julia           IT
  David           DE
    Liz           CN
  Peter           FR
   Adam         NULL
    Eva         NULL
   Yuki           JP

GANTI AKTIF

> CREATE TABLE students (name STRING, row_origin STRING)
> CREATE TABLE people (name STRING, row_origin STRING)

> INSERT INTO students VALUES ('Alice', 'table'), (NULL, 'table'), ('Bob', 'table')
> INSERT INTO people VALUES ('Alice', 'query'), (NULL, 'query'), ('Delta', 'query')

> INSERT INTO TABLE students AS t
  REPLACE ON t.name <=> s.name
  (SELECT * FROM people) AS s

> SELECT * FROM students
  name        row_origin
 -----        ----------
 Alice             query
  NULL             query
   Bob             table
 Delta             query

-- Replace any rows that are matching on `name` values, while inserting columns by name instead of position.
> INSERT INTO TABLE students AS t BY NAME
  REPLACE ON t.name <=> s.name
  SELECT * FROM (VALUES
    ('query', 'Bob'),
    ('query', 'Charlie')) AS s(row_origin, name);
> SELECT * FROM students;
    name        row_origin
 -------     -----------
   Alice           query
    NULL           query
     Bob           query
   Delta           query
 Charlie           query

timpa ulang INSERT

Peringatan

Jika memungkinkan, gunakan INSERT OVERWRITE REPLACE USING alih-alih menimpa INSERT OVERWRITE PARTITION partisi dan spark.sql.sources.partitionOverwriteMode=dynamic. Timpa partisi dapat menggunakan data kedaluarsa saat pemartisian berubah.

Menyisipkan menggunakan klausa VALUES

-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888
   Helen Davis 469 Mission St, San Diego     999999
    Jason Wang     908 Bird St, Saratoga     121212

> INSERT OVERWRITE students VALUES
    ('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
    ('Brian Reed', '723 Kern Ave, Palo Alto', 222222);

> SELECT * FROM students;
       name                 address student_id
 ---------- ----------------------- ----------
 Ashua Hill 456 Erica Ct, Cupertino     111111
 Brian Reed 723 Kern Ave, Palo Alto     222222

Menyisipkan menggunakan subkueri

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis    245 Market St,Milpitas 345678901

> INSERT OVERWRITE students PARTITION (student_id = 222222)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
    Ashua Hill   456 Erica Ct, Cupertino     111111
 Dora Williams 134 Forest Ave, Melo Park     222222

Menyisipkan menggunakan klausa TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT OVERWRITE students TABLE visiting_students;

> SELECT * FROM students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

Sisipkan dan timpa sebuah direktori

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

DENGAN SCHEMA EVOLUSI

> CREATE TABLE students (student_id INT, name STRING)
> CREATE TABLE new_students (student_id INT, name STRING, address STRING)


> INSERT INTO students VALUES (444444, 'Bob Brown'), (555555, 'Cathy Johnson')
> INSERT INTO new_students VALUES
    (111111, 'Ashua Hill', '456 Erica Ct, Cupertino'),
    (222222, 'Dora Williams', '134 Forest Ave, Melo Park')

> INSERT WITH SCHEMA EVOLUTION INTO TABLE students
    SELECT * FROM new_students


> SELECT * FROM students
student_id        name               address
----------        ------------       ----------------------
444444            Bob Brown          null
555555            Cathy Johnson      null
111111            Ashua Hill         456 Erica Ct, Cupertino
222222            Dora Williams      134 Forest Ave, Melo Park

Artikel terkait

• ekspresi tabel umum
• COPY
• DELETE
• MERGE
• PARTITION
• query
• UPDATE