时序数据库管理
创建数据库
KaiwuDB 时序数据库支持在创建数据库的时候设置数据库的生命周期和分区时间范围。数据库生命周期和分区时间范围的设置与系统的存储空间密切相关。生命周期越长,分区时间范围越大,系统所需的存储空间也越大。有关存储空间的计算公式,参见预估磁盘使用量。当用户单独指定或者修改数据库内某一时序表的生命周期或分区时间范围时,该配置只适用于该时序表。
生命周期的配置不适用于当前分区。当生命周期的取值小于分区时间范围的取值时,即使数据库的生命周期已到期,由于数据存储在当前分区中,用户仍然可以查询数据。当时间分区的所有数据超过生命周期时间点(now() - retention time
)时,系统尝试删除该分区的数据。如果此时用户正在读写该分区的数据,或者系统正在对该分区进行压缩或统计信息处理等操作,系统无法立即删除该分区的数据。系统会在下一次生命周期调度时再次尝试删除数据(默认情况下,每小时调度一次)。
前提条件
- 非三权分立模式下,用户是
admin
角色的成员。默认情况下,root
用户属于admin
角色。 - 三权分立模式下,用户是
sysadmin
角色的成员。默认情况下,sysroot
用户属于sysadmin
角色。
语法格式
CREATE TS DATABASE <db_name> [RETENTIONS <keep_duration>] [PARTITION INTERVAL <interval>];
参数说明
参数 | 说明 |
---|---|
db_name | 待创建的数据库的名称。该名称必须唯一,且遵循数据库标识符规则。目前,数据库名称不支持中文字符,最大长度不能超过 63 个字节。 |
keep_duration | 可选参数。指定数据库的生命周期,默认值为 0d ,即不会过期删除。支持配置的时间单位包括:秒(S 或 SECOND)、分钟(M 或 MINUTE)、小时(H 或 HOUR)、天(D 或 DAY)、周(W 或 WEEK)、月(MON 或 MONTH)、年(Y 或 YEAR),例如 RETENTIONS 10 DAY 。取值必须是整数值,最大值不得超过 1000 年。 |
interval | 可选参数,指定数据库数据目录分区的时间范围。默认值为 10d ,即每 10 天进行一次分区。支持配置的时间单位包括:天(D 或 DAY)、周(W 或 WEEK)、月(MON 或 MONTH)、年(Y 或 YEAR)。取值必须是整数值,最大值不得超过 1000 年。 |
语法示例
创建数据库。
以下示例创建一个名为
ts_db
的数据库。CREATE TS DATABASE ts_db;
执行成功后,控制台输出以下信息:
CREATE TS DATABASE
创建数据库时,指定数据库的生命周期。
以下示例创建一个名为
ts_db_temp
的数据库,并将数据库的生命周期设置为50d
。CREATE TS DATABASE ts_db_temp RETENTIONS 50d;
执行成功后,控制台输出以下信息:
CREATE TS DATABASE
创建数据库时,指定数据库的生命周期和分区时间范围。
以下示例创建一个名为
iot
的数据库,并将数据库的生命周期和分区时间范围分别设置为50d
和2d
。CREATE TS DATABASE iot RETENTIONS 50d PARTITION INTERVAL 2d;
执行成功后,控制台输出以下信息:
CREATE TS DATABASE
查看数据库
前提条件
无
语法格式
SHOW DATABASES [WITH COMMENT];
参数说明
参数 | 说明 |
---|---|
WITH COMMENT | 可选关键字,查看数据库的注释信息。默认情况下,数据库的注释信息为 NULL 。 |
语法示例
说明
时序数据库和关系数据库的 engine_type
分别为 TIME SERIES
和 RELATIONAL
。
查看已创建的数据库。
以下示例查看已创建的数据库。
SHOW DATABASES;
执行成功后,控制台输出以下信息:
database_name | engine_type -----------------+------------------- defaultdb | RELATIONAL postgres | RELATIONAL system | RELATIONAL ts_db | TIME SERIES (4 rows)
查看已创建数据库的注释信息。
以下示例查看数据库的注释信息。
SHOW DATABASES WITH COMMENT;
执行成功后,控制台输出以下信息:
database_name | engine_type | comment ----------------------+-------------+-------------------------------- defaultdb | RELATIONAL | NULL postgres | RELATIONAL | NULL ts_db | TIME SERIES | database for power statistics system | RELATIONAL | NULL (4 rows)
查看数据库的建库语句
SHOW CREATE DATABASE
语句用于查看创建数据库的 SQL 语句以及创建数据库时指定的相关参数。时序数据库支持查看创建数据库时使用的数据库名称、以及 retentions
和 partition interval
参数的取值。创建数据库时,如果指定 retentions
和 partition interval
参数的取值,则显示指定的取值。如未指定,则显示该参数的默认值。默认情况下,retentions
参数的取值为 0s
,partition interval
参数的取值为 10d
。
前提条件
无
语法格式
SHOW CREATE DATABASE <database_name>;
参数说明
参数 | 说明 |
---|---|
database_name | 待查看数据库的名称。 |
语法示例
以下示例查看 tsdb1
数据库的建库语句和相关参数取值。
-- 1. 创建数据库 tsdb1,并将 `retentions` 和 `partition interval` 参数的取值均设置为 `10d`。
CREATE TS DATABASE tsdb1 RETENTIONS 10d PARTITION INTERVAL 10d;
--2. 查看已创建的 tsdb1 数据库。
SHOW CREATE DATABASE tsdb1;
database_name | create_statement
----------------+-------------------------------------
tsdb1 | CREATE TS DATABASE tsdb1
| retentions 864000s
| partition interval 10d
(1 row)
切换数据库
前提条件
无
语法格式
USE <db_name>;
参数说明
参数 | 说明 |
---|---|
db_name | 待使用的数据库的名称。 |
语法示例
以下示例将 ts_db
数据库设置为当前数据库。
USE ts_db;
修改数据库
KaiwuDB 支持修改数据库的名称、生命周期、分区时间范围以及数据库区域配置。
前提条件
- 修改数据库的名称
- 非三权分立模式下,用户为 Admin 用户或者 Admin 角色成员。
- 三权分立模式下,用户是
sysadmin
角色的成员。默认情况下,sysroot
用户属于sysadmin
角色。 - 目标数据库不是当前数据库。
- 修改数据库生命周期或分区时间范围
- 非三权分立模式下,用户为 Admin 用户或者 Admin 角色成员。
- 三权分立模式下,用户是
sysadmin
角色的成员。默认情况下,sysroot
用户属于sysadmin
角色。
- 修改系统数据库区域配置
- 非三权分立模式下,用户为 Admin 用户或 Admin 角色成员。
- 三权分立模式下,用户是
sysadmin
角色的成员。默认情况下,sysroot
用户属于sysadmin
角色。
- 修改其他数据库区域配置
- 非三权分立模式下,用户拥有目标数据库的 CREATE 或 ZONECONFIG 权限。
- 三权分立模式下,用户是
sysadmin
角色的成员或者是拥有目标数据库的 CREATE 或 ZONECONFIG 权限的普通用户。默认情况下,sysroot
用户属于sysadmin
角色。
语法格式
修改数据库名称
ALTER DATABASE <old_name> RENAME TO <new_name>;
修改数据生命周期或分区时间范围
ALTER TS DATABASE <db_name> SET [RETENTIONS = <keep_duration> | PARTITION INTERVAL = <interval> ];
修改数据库区域配置
ALTER DATABASE <db_name> CONFIGURE ZONE [USING <variable> = [COPY FROM PARENT | <value>], <variable> = [<value> | COPY FROM PARENT], ... | DISCARD];
参数说明
参数 | 说明 |
---|---|
old_name | 当前数据库的名称。 |
new_name | 拟修改的数据库名称,新数据库名称必须唯一,并且遵循数据库标识符规则。目前,数据库名称不支持中文字符,最大长度不能超过 63 个字节。 |
db_name | 待修改的数据库名称。 |
keep_duration | 数据库的生命周期,默认值为 0d ,即不会过期删除。支持配置的时间单位包括:秒(S 或 SECOND)、分钟(M 或 MINUTE)、小时(H 或 HOUR)、天(D 或 DAY)、周(W 或 WEEK)、月(MON 或 MONTH)、年(Y 或 YEAR),例如 RETENTIONS 10 DAY 。取值必须是整数值,最大值不得超过 1000 年。 |
interval | 可选参数,指定数据库数据目录分区的时间范围。默认值为 10d ,即每 10 天进行一次分区。支持配置的时间单位包括:天(D 或 DAY)、周(W 或 WEEK)、月(MON 或 MONTH)、年(Y 或 YEAR)。取值必须是整数值,最大值不得超过 1000 年。 |
variable | 要修改的变量名,时序库支持修改以下变量: - range_min_bytes :数据分片的最小大小,单位为字节。数据分片小于该值时,KaiwuDB 会将其与相邻数据分片合并。默认值:256 MiB,设置值应大于 1 MiB(1048576 字节),小于数据分片的最大大小。 - range_max_bytes :数据分片的最大大小,单位为字节。数据分片大于该值时,KaiwuDB 会将其切分到两个数据分片。默认值: 512 MiB。设置值不得小于 5 MiB(5242880 字节)。- gc.ttlseconds :数据在垃圾回收前保留的时间,单位为秒。默认值为 90000 (25 小时)。设置值建议不小于 600 秒(10 分钟),以免影响长时间运行的查询。设置值较小时可以节省磁盘空间,设置值较大时会增加 AS OF SYSTEM TIME 查询的时间范围。另外,由于每行的所有版本都存储在一个永不拆分的单一数据分片内,不建议将该值设置得太大,以免单行的所有更改累计超过 64 MiB,导致内存不足或其他问题。- num_replicas :副本数量。默认值为 3。system 数据库、meta 、liveness 和 system 数据分片的默认副本数为 5。 注意:集群中存在不可用节点时,副本数量不可缩减。- ts_merge.days :时序数据分片合并时间。同一个时序表同哈希点按照时间戳分裂后,超过该时间的数据分片将自动合并,且合并后不会再自动拆分。默认值:10(10天)。设置值必须大于等于 0,设置值为 0 时表示时序数据分片按照时间戳分裂后便立刻自动合并。系统数据分片数量过多导致出现网络等故障时可以将该值适当调小,以缓解数据过大的问题。提示: KaiwuDB 默认只根据哈希点拆分数据分片,因此数据分片按时间合并功能默认关闭,如需支持按时间合并数据分片,需将 kv.kvserver.ts_split_interval 实时参数设置为 1 , 将 kv.kvserver.ts_split_by_timestamp.enabled 实时参数设置为 true 以支持按照哈希点和时间戳拆分数据分片。 |
value | 变量值。 |
COPY FROM PARENT | 使用父区域的设置值。 |
DISCARD | 移除区域配置,采用默认值。 |
语法示例
修改数据库的名称。
以下示例将
ts_db
数据库重命名为tsdb
。ALTER DATABASE ts_db RENAME TO tsdb;
修改数据库的生命周期。
以下示例将
tsdb
数据库的生命周期设置为10 day
。ALTER TS DATABASE tsdb SET RETENTIONS = 10 day;
修改数据库的分区时间范围。
以下示例将
tsdb
数据库的分区时间范围设置为2 day
。ALTER TS DATABASE tsdb SET PARTITION INTERVAL = 2 day;
修改数据库的区域配置。
以下示例将
tsdb
数据库的副本数改为5个,将数据在垃圾回收前保留的时间改为100000秒。-- 1. 修改区域配置 > ALTER DATABASE tsdb CONFIGURE ZONE USING num_replicas = 5, gc.ttlseconds = 100000; CONFIGURE ZONE 1 -- 2. 查看修改是否成功 > SHOW ZONE CONFIGURATION FOR DATABASE tsdb; zone_name | config_sql +-----------+-----------------------------------------+ tsdb | ALTER DATABASE tsdb CONFIGURE ZONE USING | range_min_bytes = 268435456, | range_max_bytes = 536870912, | gc.ttlseconds = 100000, | num_replicas = 5, | constraints = '[]', | lease_preferences = '[]' (6 rows)
删除数据库
DROP DATABASE
语句用于删除目标数据库。删除成功后,所有用户针对目标数据库和其对象的所有权限均被删除。
说明
删除时序库时,系统检查当前时序库是否被数据推送服务引用。如果是,则输出错误消息并列出所有引用此时序库的数据推送服务名称。用户可以使用 CASCADE
关键字级联删除时序库及相关的数据推送服务。
前提条件
- 非三权分立模式下,用户拥有目标数据库及对象的 DROP 权限。
- 三权分立模式下,用户是
sysadmin
角色的成员或者是拥有目标数据库及对象 DROP 权限的普通用户。默认情况下,sysroot
用户属于sysadmin
角色。 - 目标数据库不能是当前数据库。如需删除当前数据库,使用
USE <database_name>
语句将当前数据库切换成其他数据库,再进行删除。
语法格式
DROP DATABASE [IF EXISTS] <db_name> [CASCADE];
参数说明
参数 | 说明 |
---|---|
IF EXISTS | 可选关键字。当使用 IF EXISTS 关键字时,如果目标数据库存在,系统删除目标数据库。如果目标数据库不存在,系统删除数据库失败,但不会报错。当未使用 IF EXISTS 关键字时,如果目标数据库存在,系统删除目标数据库。如果目标数据库不存在,系统报错,提示目标数据库不存在。 |
db_name | 待删除的数据库的名称。 |
CASCADE | 可选关键字,表示级联删除,即删除数据库中的所有表。CASCADE 关键字不会列出待删除的关联对象,应谨慎使用。 |
语法示例
以下示例使用 CASCADE
关键字删除 tsdb
数据库及其级联对象。
-- 1. 查看 tsdb 数据库中的时序表。
SHOW TABLES FROM tsdb;
table_name | table_type
--------------+--------------------
sensor_data | TIME SERIES TABLE
temp | TIME SERIES TABLE
water | TIME SERIES TABLE
(3 rows)
-- 2. 删除 tsdb 数据库及其级联对象。
DROP DATABASE tsdb CASCADE;
DROP DATABASE
-- 3. 查看 tsdb 数据库中的时序表。
SHOW TABLES FROM tsdb;
ERROR: target database or schema does not exist