INSERT
Область применения: Databricks SQL Databricks Runtime
Вставляет новые строки в table и при необходимости усекает table или разделы. Вставляемые строки указываются по выражениям значений или результату запроса.
Databricks не поддерживает INSERT
для Hive Avrotables, если тип timestamp-millis
присутствует в tableschema.
Синтаксис
INSERT { OVERWRITE | INTO } [ TABLE ] table_name
[ PARTITION clause ]
[ ( column_name [, ...] ) | BY NAME ]
query
INSERT INTO [ TABLE ] table_name
REPLACE WHERE predicate
query
Примечание.
Когда вы выполняете INSERT INTO
для Delta table, поддерживаются schema принуждение и развитие.
Если тип данных columnнельзя безопасно привести к типу данных Delta table, создается исключение среды выполнения.
Если для эволюции
Parameters
INTO
илиOVERWRITE
При указании
OVERWRITE
применяется следующее:- При отсутствии
partition_spec
table обрезается перед вставкой первой строки. - В противном случае перед вставкой первой строки усекаются все секции, соответствующие
partition_spec
.
Если указать
INTO
, все вставляемые строки добавляются к существующим строкам.- При отсутствии
-
Определяет, куда вставляется table. Имя не должно содержать временную спецификацию. Если table не удается найти, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.
table_name
не должно быть иностранным table.применимо:, начиная с версии Databricks Runtime 16.0
-
Необязательный параметр, указывающий целевой partition для insert. Кроме того, можно частично указать partition.
При указании статического partition (
column = value
) этот column не должен повторяться в insertcolumnlist.При указании динамического partition для
INSERT OVERWRITE
,table_name
должно быть Delta Lake table. ( column_name [, …] )
Необязательный list из columns в table. Команда insert может указывать любой конкретный column из table не более одного раза.
Область применения: Databricks SQL Databricks Runtime 12.2 LTS и выше
- Если эта команда исключает column, Databricks SQL назначает соответствующее значение по умолчанию.
- Если целевой tableschema не определяет значение по умолчанию для вставленного column, Databricks SQL назначает
NULL
, если column имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.
Отсутствие columnlist эквивалентно указанию всех columns, за исключением тех, которым присвоены values в условии
PARTITION
, в порядке, определенном в table.BY NAME
Область применения: Databricks SQL Databricks Runtime 13.3 LTS и выше
Если это предложение используется вместо явного columnlist, команда использует предоставленные column имена
query
для создания columnlist в порядкеquery
. Как и в явном columnlist, каждая column должна существовать в целевом tableи не должна дублироваться. Если column, присутствующий вtable_name
, не является частью подразумеваемого columnlist, то вместо этого будет использоваться значениеDEFAULT
.BY NAME
также соответствует атрибутам структур по имени.Ни один column в
query
не может соответствовать column, указанному в условииPARTITION
или любой сгенерированной column.ЗАМЕНИТЬ WHEREboolean_expression
Область применения: Databricks SQL Databricks Runtime 12.2 LTS и выше
Если
table_name
является Delta Lake table, сначала удалите строки, соответствующиеboolean_expression
, перед вставкой строк, соответствующихboolean-expression
, указанных вquery
. Строки, вquery
которых не совпадаютboolean_expression
, игнорируются.boolean_expression
может быть любым выражением, которое оценивается в типеBOOLEAN
результата.См . произвольный выборочный перезапись с помощью replaceWhere.
-
Запрос, создающий вставляемые строки.
Необходимо довести количество columns, возвращаемое запросом, до указанного или подразумеваемого insertcolumnlist.
Если тип данных нельзя безопасно привести к соответствующему column типу данных, выбрасывается исключение среды выполнения.
Область применения: Databricks SQL Databricks Runtime 11.3 LTS и выше
- Если
query
состоит из VALUES предложения, тогдаexpression
может бытьDEFAULT
. - Если
query
состоит из клаузулы SELECT,named_expression
можно бытьDEFAULT
. -
DEFAULT
insert явно определенноеDEFAULT
выражение соответствующего column вtable_name
илиNULL
, если ни один из них не определен.
Если эволюция
включена, новые могут существовать в качестве последнего вашего (или вложенных ) для развития . - Если
Примеры
В этом разделе рассматриваются следующие вопросы.
- INSERT INTO
- Insert с columnlist
- Insert со спецификацией partition и columnlist
- INSERT с помощью условия BY NAME
- ЗАМЕНИТЬ WHERE
- INSERT ПЕРЕЗАПИСЬ
INSERT INTO
INSERT с помощью VALUES
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
PARTITIONED BY (student_id);
-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);
-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);
-- Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
('Bob Brown', '456 Taylor St, Cupertino', 444444),
('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);
-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
('Gwyneth Zhao', '120 Main St, Rockport', 666666),
('Jackson Peterson', DEFAULT, 777777);
> SELECT * FROM students;
name address student_id
---------------- ------------------------ ----------
Amy Smith 123 Park Ave, San Jose 111111
Grayson Miller unknown 222222
Youna Kim unknown 333333
Bob Brown 456 Taylor St, Cupertino 444444
Cathy Johnson 789 Race Ave, Palo Alto 555555
Gwyneth Zhao 120 Main St, Rockport 666666
Jackson Peterson unknown 777777
Insert с помощью вложенного запроса
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St, Milpitas 345678901
> INSERT INTO students PARTITION (student_id = 444444)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;
Insert с использованием условие TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT INTO students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave,San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Insert в каталог
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT INTO delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Insert с columnlist
> INSERT INTO students (address, name, student_id) VALUES
('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
name address student_id
--------- ---------------------- ----------
Kent Yao Hangzhou, China 11215016
Insert с спецификацией partition и columnlist
> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
name address student_id
------------ ---------------------- ----------
Kent Yao Jr. Hangzhou, China 11215017
INSERT с помощью предложения BY NAME
> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
0 data {"a":1,"b":2}
> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
0 [{"a":1,"b":2}]
NULL [{"a":1,"b":2}]
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS
ЗАМЕНА WHERE
> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
(DATE'2022-10-01', 1234),
(DATE'2022-10-02', 2345),
(DATE'2022-10-03', 3456),
(DATE'2022-11-01', 3214);
-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
VALUES (DATE'2022-10-01', 1237),
(DATE'2022-10-02', 2378),
(DATE'2022-10-04', 2456),
(DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY tx_date;
tx_date amount
---------- ------
2022-10-01 1237
2022-10-02 2378
2022-10-04 2456
2022-10-05 6328
2022-11-01 3214
INSERT ПЕРЕЗАПИСЬ
Insert с помощью клаузу VALUES
-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Helen Davis 469 Mission St, San Diego 999999
Jason Wang 908 Bird St, Saratoga 121212
> INSERT OVERWRITE students VALUES
('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
('Brian Reed', '723 Kern Ave, Palo Alto', 222222);
> SELECT * FROM students;
name address student_id
---------- ----------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Brian Reed 723 Kern Ave, Palo Alto 222222
Insert с помощью вложенного запроса
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St,Milpitas 345678901
> INSERT OVERWRITE students PARTITION (student_id = 222222)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Dora Williams 134 Forest Ave, Melo Park 222222
Insert с помощью предложения TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT OVERWRITE students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Insert перезаписать каталог
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111