Поделиться через


INSERT

Область применения:флажок Databricks SQL флажок Databricks Runtime

Вставляет новые строки в table и при необходимости усекает table или разделы. Вставляемые строки указываются по выражениям значений или результату запроса.

Databricks не поддерживает INSERT для Hive Avrotables, если тип timestamp-millis присутствует в tableschema.

Синтаксис

INSERT { OVERWRITE | INTO } [ TABLE ] table_name
    [ PARTITION clause ]
    [ ( column_name [, ...] ) | BY NAME ]
    query

INSERT INTO [ TABLE ] table_name
    REPLACE WHERE predicate
    query

Примечание.

Когда вы выполняете INSERT INTO для Delta table, поддерживаются schema принуждение и развитие. Если тип данных columnнельзя безопасно привести к типу данных Delta table, создается исключение среды выполнения. Если для эволюции включена, новые могут существовать как последняя вашего (или последние вложенные ) для того, чтобы мог развиваться.

Parameters

  • INTO или OVERWRITE

    При указании OVERWRITE применяется следующее:

    • При отсутствии partition_spectable обрезается перед вставкой первой строки.
    • В противном случае перед вставкой первой строки усекаются все секции, соответствующие partition_spec.

    Если указать INTO, все вставляемые строки добавляются к существующим строкам.

  • table_name

    Определяет, куда вставляется table. Имя не должно содержать временную спецификацию. Если table не удается найти, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.

    table_name не должно быть иностранным table.

    применимо:отмечено , начиная с версии Databricks Runtime 16.0

    table_nameможет включать спецификацию параметров.

  • PARTITION предложение

    Необязательный параметр, указывающий целевой partition для insert. Кроме того, можно частично указать partition.

    При указании статического partition (column = value) этот column не должен повторяться в insertcolumnlist.

    При указании динамического partition для INSERT OVERWRITE, table_name должно быть Delta Lake table.

  • ( column_name [, …] )

    Необязательный list из columns в table. Команда insert может указывать любой конкретный column из table не более одного раза.

    Область применения:флажок Databricks SQL флажок Databricks Runtime 12.2 LTS и выше

    • Если эта команда исключает column, Databricks SQL назначает соответствующее значение по умолчанию.
    • Если целевой tableschema не определяет значение по умолчанию для вставленного column, Databricks SQL назначает NULL, если column имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.

    Отсутствие columnlist эквивалентно указанию всех columns, за исключением тех, которым присвоены values в условии PARTITION, в порядке, определенном в table.

  • BY NAME

    Область применения:флажок Databricks SQL флажок Databricks Runtime 13.3 LTS и выше

    Если это предложение используется вместо явного columnlist, команда использует предоставленные column имена query для создания columnlist в порядке query. Как и в явном columnlist, каждая column должна существовать в целевом tableи не должна дублироваться. Если column, присутствующий в table_name, не является частью подразумеваемого columnlist, то вместо этого будет использоваться значение DEFAULT.

    BY NAME также соответствует атрибутам структур по имени.

    Ни один column в query не может соответствовать column, указанному в условии PARTITION или любой сгенерированной column.

  • ЗАМЕНИТЬ WHEREboolean_expression

    Область применения:флажок Databricks SQL флажок Databricks Runtime 12.2 LTS и выше

    Если table_name является Delta Lake table, сначала удалите строки, соответствующие boolean_expression, перед вставкой строк, соответствующих boolean-expression, указанных в query. Строки, в query которых не совпадают boolean_expression , игнорируются.

    boolean_expression может быть любым выражением, которое оценивается в типе BOOLEANрезультата.

    См . произвольный выборочный перезапись с помощью replaceWhere.

  • query

    Запрос, создающий вставляемые строки.

    Необходимо довести количество columns, возвращаемое запросом, до указанного или подразумеваемого insertcolumnlist.

    Если тип данных нельзя безопасно привести к соответствующему column типу данных, выбрасывается исключение среды выполнения.

    Область применения:флажок Databricks SQL флажок Databricks Runtime 11.3 LTS и выше

    • Если query состоит из VALUES предложения, тогда expression может быть DEFAULT.
    • Если query состоит из клаузулы SELECT, named_expression можно быть DEFAULT.
    • DEFAULT insert явно определенное DEFAULT выражение соответствующего column в table_nameили NULL, если ни один из них не определен.

    Если эволюция включена, новые могут существовать в качестве последнего вашего (или вложенных ) для развития .

Примеры

В этом разделе рассматриваются следующие вопросы.

INSERT INTO

INSERT с помощью VALUES

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
  PARTITIONED BY (student_id);

-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);

-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);

-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);

--  Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
    ('Bob Brown', '456 Taylor St, Cupertino', 444444),
    ('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);

-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
    ('Gwyneth Zhao', '120 Main St, Rockport', 666666),
    ('Jackson Peterson', DEFAULT, 777777);

> SELECT * FROM students;
            name                  address student_id
 ---------------- ------------------------ ----------
        Amy Smith   123 Park Ave, San Jose     111111
   Grayson Miller                  unknown     222222
        Youna Kim                  unknown     333333
        Bob Brown 456 Taylor St, Cupertino     444444
    Cathy Johnson  789 Race Ave, Palo Alto     555555
     Gwyneth Zhao    120 Main St, Rockport     666666
 Jackson Peterson                  unknown     777777

Insert с помощью вложенного запроса

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis   245 Market St, Milpitas 345678901

> INSERT INTO students PARTITION (student_id = 444444)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444

-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;

Insert с использованием условие TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT INTO students TABLE visiting_students;

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith     123 Park Ave,San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888

Insert в каталог

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT INTO delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Insert с columnlist

> INSERT INTO students (address, name, student_id) VALUES
    ('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
      name                address student_id
 --------- ---------------------- ----------
 Kent Yao         Hangzhou, China   11215016

Insert с спецификацией partition и columnlist

> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
    ('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
         name                address student_id
 ------------ ---------------------- ----------
 Kent Yao Jr.        Hangzhou, China   11215017

INSERT с помощью предложения BY NAME

> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
  0  data  {"a":1,"b":2}

> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
  0     [{"a":1,"b":2}]
  NULL  [{"a":1,"b":2}]

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
 Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS

ЗАМЕНА WHERE

> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
   (DATE'2022-10-01', 1234),
   (DATE'2022-10-02', 2345),
   (DATE'2022-10-03', 3456),
   (DATE'2022-11-01', 3214);

-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
   VALUES (DATE'2022-10-01', 1237),
          (DATE'2022-10-02', 2378),
          (DATE'2022-10-04', 2456),
          (DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-10-04   2456
 2022-10-05   6328
 2022-11-01   3214

INSERT ПЕРЕЗАПИСЬ

Insert с помощью клаузу VALUES

-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888
   Helen Davis 469 Mission St, San Diego     999999
    Jason Wang     908 Bird St, Saratoga     121212

> INSERT OVERWRITE students VALUES
    ('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
    ('Brian Reed', '723 Kern Ave, Palo Alto', 222222);

> SELECT * FROM students;
       name                 address student_id
 ---------- ----------------------- ----------
 Ashua Hill 456 Erica Ct, Cupertino     111111
 Brian Reed 723 Kern Ave, Palo Alto     222222

Insert с помощью вложенного запроса

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis    245 Market St,Milpitas 345678901

> INSERT OVERWRITE students PARTITION (student_id = 222222)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
    Ashua Hill   456 Erica Ct, Cupertino     111111
 Dora Williams 134 Forest Ave, Melo Park     222222

Insert с помощью предложения TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT OVERWRITE students TABLE visiting_students;

> SELECT * FROM students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

Insert перезаписать каталог

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111