共计 2015 个字符,预计需要花费 6 分钟才能阅读完成。
本篇内容主要讲解“怎么理解 PostgreSQL12 COPY 和 bulkloading 有什么特性”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让丸趣 TV 小编来带大家学习“怎么理解 PostgreSQL12 COPY 和 bulkloading 有什么特性”吧!
业务是否依赖 COPY 命令加载数据?PostgreSQL12 提供了一个新特性,大大加快了加载速度。
COPY:Loading and unloading data as fast as possible
细看 PostgreSQL12 的 COPY 语法,发现有两处变动:
1)\h 会有手册文档链接
2)COPY 支持 WHERE 条件
下面是完整语法:
db12=# \h COPY
Command: COPY
Description: copy data between a file and a table
Syntax:
COPY table_name [ ( column_name [, ...] ) ]
FROM { filename | PROGRAM command | STDIN }
[ [ WITH ] ( option [, ...] ) ]
[ WHERE condition ]
COPY { table_name [ ( column_name [, ...] ) ] | ( query ) }
TO { filename | PROGRAM command | STDOUT }
[ [ WITH ] ( option [, ...] ) ]
where option can be one of:
FORMAT format_name
FREEZE [ boolean ]
DELIMITER delimiter_character
NULL null_string
HEADER [ boolean ]
QUOTE quote_character
ESCAPE escape_character
FORCE_QUOTE { ( column_name [, ...] ) | * }
FORCE_NOT_NULL ( column_name [, ...] )
FORCE_NULL ( column_name [, ...] )
ENCODING encoding_name
URL: https://www.postgresql.org/docs/12/sql-copy.html
虽然添加文档链接功能带来便利,但是 WHERE 过滤功能更加有用。这个功能的目的是什么?当前,COPY 只能导入整个文件。但是某些场景下会有问题:很多场景下,人们只想加载数据的一个子集,并且在导出前必须编写大量代码进行过滤。
COPY…WHERE: 导入时过滤
PostgreSQL 通过该条件可以轻松地进行过滤。下面讲述一个简单的例子:
db12=# CREATE TABLE t_demo AS
SELECT * FROM generate_series(1, 1000) AS id;
SELECT 1000
首先先插入 1000 行数据,然后导出到一个文件:
db12=# COPY t_demo TO /tmp/file.txt
COPY 1000
最后,再重新导入数据:
db12=# CREATE TABLE t_import (x int);
CREATE TABLE
db12=# COPY t_import FROM /tmp/file.txt WHERE x 5;
COPY 4
db12=# SELECT * FROM t_import;
x
1
2
3
4
(4 rows)
如上说是,过滤数据非常简单直接。需要注意,导出列是“id”,导入列是“x”。文件文件不知道导入表的表结构 — 需要确保过滤导入表的列名。
其他特性
COPY 可以将数据发送到 UNIX pipe,还可以从 pipe 中读取数据。如下所示:
db12=# COPY t_demo TO PROGRAM gzip -c /tmp/file.txt.gz
COPY 1000
db12=# COPY t_import FROM PROGRAM gunzip -c /tmp/file.txt.gz
WHERE x BETWEEN 100 AND 103;
COPY 4
db12=# SELECT * FROM t_import WHERE x = 100;
x
-----
100
101
102
103
(4 rows)
某些场景下,不止想将数据导出。上面场景,我们想导出数据时将数据压缩;导入时将数据解压并过滤。如上所示,这种方法非常简单。
到此,相信大家对“怎么理解 PostgreSQL12 COPY 和 bulkloading 有什么特性”有了更深的了解,不妨来实际操作一番吧!这里是丸趣 TV 网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!