文档下载建议反馈入口

  • 硬件
  • 操作系统
  • 软件依赖
  • 端口
  • 安装包
  • 节点配置

容器部署准备

硬件

说明

为了提高可用性,降低数据丢失的风险,建议在单台计算机上只运行一个节点。KaiwuDB 采用跨节点复制机制,如果在一台计算机上同时运行多个节点,当计算机发生故障时,更有可能丢失数据。

下表列出使用容器安装包部署 KaiwuDB 所需的硬件规格要求。

项目要求
CPU 和内存- 单节点配置建议不低于 4 核 8G。
- 对于数据量大、复杂工作负载、高并发和高性能场景,建议配置更高的 CPU 和内存资源以确保系统的高效运行。
磁盘- 推荐使用 SSD 或者 NVMe 设备,尽量避免使用 NFS、CIFS、CEPH 等共享存储。
- 使用 HDD 硬盘部署单机版本时,避免设备数过多或每秒写入测点数过高,否则数据写入性能将显著下降;不建议使用 HDD 部署分布式集群版本。
- 磁盘必须能够实现 500 IOPS 和 30MB/s 处理效率。
- KaiwuDB 系统自身启动不会占用过多磁盘容量(低于 1G)。实际所需磁盘大小主要取决于用户的业务量以及是否开启 KaiwuDB 压缩等可以减少原始数据磁盘占用的功能,更多详细信息,参见预估磁盘使用量
文件系统建议使用 ext4 文件系统。

操作系统

说明

KaiwuDB 容器安装包支持在以下已安装 Docker 的操作系统中进行安装部署。

操作系统版本架构
Anolis7.9ARM_64
7.9x86_64
8.6ARM_64
8.6x86_64
CentOS7x86_64
8x86_64
DebianV11ARM_64
KylinOSV10 SP3 2403
V10 SP3 2303
ARM_64
V10 SP3 2403
V10 SP3 2303
x86_64
openEuler22.03x86_64
UbuntuV18.04x86_64
V20.04ARM_64
V20.04x86_64
V22.04ARM_64
V22.04x86_64
V24.04ARM_64
V24.04x86_64
UOS1050ex86_64
1060ex86_64
1060eARM_64
1070ex86_64

软件依赖

目标机器已安装 Docker Compose(1.20.0 及以上版本)。

示例:

sudo apt-get install docker-compose

端口

下表列出 KaiwuDB 服务需要映射的端口。在安装部署前,确保目标机器的以下端口没有被占用且没有被防火墙拦截。在安装部署时,用户可以修改 deploy.cfg 文件中的端口配置参数。

端口号说明
8080数据库 Web 服务端口
26257数据库服务端口、节点监听端口和对外连接端口

安装包

获取系统环境对应的容器安装包,将安装包复制到待安装 KaiwuDB 的目标机器上,然后解压缩安装包:

tar -zxvf <install_package_name>

解压后生成的目录包含以下文件:

文件说明
add_user.sh安装、启动 KaiwuDB 后,为 KaiwuDB 数据库创建用户。
deploy.cfg安装部署配置文件,用于配置部署节点的 IP 地址、端口等配置信息。
deploy.sh安装部署脚本,用于安装、卸载、启动、状态获取、关停和重启等操作。
packages 目录存放 DEB、RPM 和镜像包。
utils 目录存放工具类脚本。

节点配置

SSH 免密登录

  1. 登录当前节点,生成公私密钥对。

    ssh-keygen -f ~/.ssh/id_rsa -N ""
    

    参数说明:

    • -f ~/.ssh/id_rsa:指定生成的密钥对文件目录。
    • -N:将密钥密码设置为空,以实现免密登录。
  2. 将密钥分发至集群其它节点。

    ssh-copy-id -f -i ~/.ssh/id_rsa.pub -o StrictHostKeyChecking=no <target_node>
    
  3. 确认是否可以使用 SSH 免密登录到集群其它节点。

    ssh <target_node>
    

时钟同步

KaiwuDB 采用中等强度的时钟同步机制来维持数据的一致性。当节点检测到自身的机器时间与集群中至少 50% 的节点的机器时间的误差值超过集群最大允许时间误差值(默认为 500 ms)的 80% 时,该节点会自动停止,从而避免违反数据一致性,带来读写旧数据的风险。每个节点都必须运行 NTP(Network Time Protocol,网络时间协议)或其他时钟同步软件,防止时钟漂移得太远。

以下示例以 CentOS 7 为例,介绍如何配置时钟同步。

  1. 使用 SSH 登录到将要部署集群的节点。

  2. 关闭 timesyncd 服务。

    timedatectl set-ntp no
    
  3. 安装 NTP 服务。

    sudo apt install ntp
    
  4. 关闭 NTP 后台进程。

    service ntp stop
    
  5. 通过 NTP 服务同步机器时间。

    ntpdate -u 0.cn.pool.ntp.org
    
  6. 打开 /etc/ntp.conf 文件,查找 serverpool 的相关配置并将其修改为如下内容。

    server 0.cn.pool.ntp.org iburst
    server 1.cn.pool.ntp.org iburst
    server 2.cn.pool.ntp.org iburst
    server 3.cn.pool.ntp.org iburst
    
  7. 启动 NTP 服务。

    service ntp start
    
  8. 在所有要安装 KaiwuDB 服务的集群节点上重复执行以上步骤。