YashanDB分布式可视化部署

简介: 本文介绍YashanDB的分布式部署流程,涵盖服务端安装、数据库基本信息与服务器配置、节点信息设置、建库参数调整、环境变量配置及安装结果检查等步骤。通过可视化Web界面操作,详细说明了各环节配置方法和注意事项,确保用户顺利完成数据库集群的搭建与初始化设置。适用于需要分布式数据库部署的场景,提供全面的操作指导。

本文内容来自YashanDB官网,原文内容请见 https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%E5%92%8C%E5%8D%87%E7%BA%A7/%E5%AE%89%E8%A3%85%E9%83%A8%E7%BD%B2/YashanDB%E6%9C%8D%E5%8A%A1%E7%AB%AF%E5%AE%89%E8%A3%85%EF%BC%88%E5%8F%AF%E8%A7%86%E5%8C%96%EF%BC%89/%E5%88%86%E5%B8%83%E5%BC%8F%E9%83%A8%E7%BD%B2.html

  1. 以yashan用户登录192.168.1.2服务器。

  2. 执行如下命令,进入安装目录。

    $ cd /home/yashan/install
    

    Copied!

  3. 执行如下命令,使用yasom启动Web服务端:

    $ ./bin/yasom --web --listen 192.168.1.2:9001
    

    Copied!

    • --web:指定以Web服务端启动。
    • --listen:指定监听的地址(即可视化安装的网页地址),格式为IP:PORT,通常设置为当前服务器的IP,端口推荐使用9001。
  4. 在PC端浏览器中访问可视化安装的网页地址。

    home

步骤2:配置数据库基本信息与服务器信息


  1. 根据实际情况,配置数据库基本信息:

    • 数据库名称:填写数据库集群名称,该名称也将作为初始数据库的名称(database name)。必须以字母开头,长度为[1,63]个字符,例如yashandb。
    • 数据库类型:选择数据库部署形态,例如分布式。
    • 安装包路径:填写安装包所在路径,安装用户需有该路径的操作权限,例如/home/yashan/install/yashandb-23.3.1.100-linux-x86_64.tar.gz。
    • 插件包路径:选填参数,如需使用DBLINK功能以及更丰富的内置函数(例如LSFA_LISTAGG函数),需先下载plugin插件包至服务器并填写插件包所在路径,安装用户需有该路径的操作权限,例如/home/yashan/install/yashandb-plugins-all-23.3.1.100-linux-x86_64.tar.gz。安装完成后,无法单独安装该插件包
  2. 在服务器列表中,默认识别Web服务所在服务器的信息,检查确认安装路径等信息无误后单击【尝试连接】检查连通性。

    de_base_info_01

  3. 单击服务器列表上方的【添加】。

  4. 在弹出的对话框中,配置其他服务器信息,单击【确定】保存配置。

    • 主机地址:服务器的IP地址,格式:192.168.1.3192.168.1.[3-4],允许配置多个IP地址/集,使用换行符分割。
    • 用户名:安装用户的名称,例如yashan。
    • 密码:可选参数,安装用户的密码,若已配置当前服务器对其他服务器SSH免密,无需填写密码。
    • SSH端口:SSH端口,例如22。
    • 安装路径:数据库安装路径,即安装前划分的安装目录,例如/data/yashan/yasdb_home。

    base_info_02

  5. 单击【全部尝试连接】检查连通性。

    de_base_info_03

  6. 确认信息无误后,单击【下一步】。

步骤3:配置服务器sudo


  1. 在数据库配置区域,可以配置以下功能:

    • 创建cgroup:开启表示创建用于YashanDB CPU资源管理的cgoup目录,并需填写服务器其他配置区域的cgroup目录。仅需安装可开启CPU资源管理的数据库(非级联备)时需配置该参数,具体请查阅配置资源管理
    • 开机自启monit:如需开启该功能,需先参照依赖项准备检查并确保所有服务器中已安装符合要求的monit。开启时,守护进程将在服务器开机后自行启动并拉起YashanDB的各个进程,间接实现数据库的开机自启动。
    • 用户添加到YASDBA用户组:开启表示将安装用户加入YASDBA组,可免密登录数据库。

    上述功能开启后均需安装用户具备sudo权限,本示例使用默认配置,即仅开启将用户添加到YASDBA用户组。

    Note:

    若【开机自启monit】参数设置为关闭但后续需使用相关功能,可参考守护进程完成相关配置。

    de_sudo

  2. 确认信息无误后,单击【下一步】。

步骤4:配置数据库节点信息


  1. 在弹出的节点规模配置对话框中,根据实际规划的节点数调整相关配置,单击【确定】保存信息。

    • MN节点数量:选择MN节点数量。
    • CN节点数量:选择CN节点数量。
    • DN节点组数量:选择DN节点组数量。
    • DN节点数量:选择DN节点数量。
    • 起始端口:填写数据库监听端口的起始值,若存在多个监听端口系统会根据端口划分规则自行计算,默认值为1688。
    • 节点默认路径:填写YashanDB的数据目录,置空则默认使用服务器安装路径下的DATA目录,安装后修改不生效,例如/data/yashan/yasdb_data。
    • 是否开启推荐配置:开启推荐配置时,yasom将调用DBMS_PARAM高级包生成推荐参数覆盖同名配置参数,默认为开启。开启时,还需配置以下参数:
      • YashanDB内存占用:设置YashanDB可用服务器内存的百分比,yasom将根据该百分比计算出具体内存限制。
      • 表类型:选择主要业务常用的表类型,修改数据库配置参数,在数据库使用该表类型时获取最大性能,默认为LSC。

    de_node_info_01

  2. 在yasom配置区域,可根据实际情况调整主yasom所在服务器和监听端口。

    • yasom所在主机:默认为当前服务器IP。
    • LISTEN_ADDR:yasom的监听端口,默认为1675。
  3. 在推荐配置区域,检查配置信息,此处配置取至节点规模中的对应配置。

    开启推荐配置后,部分参数会有固定值,无法修改。参数如下:
    +--------------------------------+-------------+---------+
    |            name                |  recommend  | restart |
    +--------------------------------+-------------+---------+
    | DATA_BUFFER_SIZE               |       5498M |  True   |
    | VM_BUFFER_SIZE                 |        741M |  True   |
    | WORK_AREA_STACK_SIZE           |          1M |  True   |
    | WORK_AREA_POOL_SIZE            |         16M |  True   |
    | WORK_AREA_HEAP_SIZE            |       2048K |  True   |
    | SHARE_POOL_SIZE                |        741M |  True   |
    | LARGE_POOL_SIZE                |        112M |  True   |
    | MAX_PARALLEL_WORKERS           |          12 |  True   |
    | SCOL_DATA_BUFFER_SIZE          |        128M |  True   |
    | SCOL_DATA_PRELOADERS           |           2 |  True   |
    | COLUMNAR_WORK_AREA_HEAP_SIZE   |         32M |  True   |
    | COLUMNAR_VM_BUFFER_SIZE        |        128M |  True   |
    | COLUMNAR_BULK_SIZE             |        1024 |  True   |
    | COMPRESSION                    |         LZ4 |  True   |
    | PQ_POOL_SIZE                   |        128M |  True   |
    | MAX_SESSIONS                   |         128 |  True   |
    | MAX_WORKERS                    |           0 |  True   |
    | TAB_QUEUE_WINDOW_SIZE          |           8 |  True   |
    | BLOOM_FILTER_FACTOR            |         0.5 |  True   |
    | DEGREE_OF_PARALLEL             |           1 |  True   |
    | MMS_DATA_LOADERS               |           3 |  True   |
    | CHECKPOINT_INTERVAL            |        192M |  False  |
    | CHECKPOINT_TIMEOUT             |          60 |  False  |
    | REDOFILE_IO_MODE               |      DIRECT |  True   |
    | DATAFILE_IO_MODE               |     DEFAULT |  True   |
    | COMMIT_LOGGING                 |   IMMEDIATE |  False  |
    | RECOVERY_PARALLELISM           |           2 |  True   |
    | REDO_BUFFER_SIZE               |         16M |  True   |
    +--------------------------------+-------------+---------+
    

    Copied!

  4. 在yasagent配置区域,可按需调整以下配置:

    • yasagent LISTEN_ADDR:yasagent的监听端口,默认为1676。
    • DB自适应内存限制:仅当开启推荐配置时,必须配置内存限制,格式为数字 + 空/K/M/G/T,取值范围[节点数 * 1536M,服务器最大内存]。
    • 包含节点:显示每个服务器上对应部署的节点信息,带星标的节点角色为主,其他为备。可拖拽节点调整节点分布。
  5. 在节点配置区域,展开节点列表,单击节点名称,可查看节点信息,并可按需调整部分配置。 de_node_info_next

  6. 确认信息无误后,单击【下一步】。

步骤5:设置建库参数


在【数据库建库参数】页面,可参考分布式配置文件按需增/删/改各节点组的参数,确认信息无误后,单击【下一步】。

de_create_param_next

步骤6:设置配置参数


在【数据库节点参数】页面,可按需增/删/改各节点的参数,确认信息无误后,单击【保存并下一步】。

de_node_param_next

步骤7:部署数据库


  1. 在【数据库全局信息】页面,确认信息无误后,单击【部署】。

    de_global_info_next

  2. 部署任务进度达到100%时,表示部署完成,单击【退出部署程序】退出。 deploy_02

    若不手动退出,服务端也会在一定时间内自动退出。

Note:

部署完成后,yasom会在/home/yashan/install/conf/SE/yashandb目录中生成hosts.toml和yashandb.toml文件,其中yashandb为数据库名称,此目录为安装目录。

步骤8:配置环境变量


以安装用户登录到每个服务器上,执行如下命令生效环境变量。


$ cd /data/yashan/yasdb_home/yashandb/23.3.1.100/conf


$ cat yashandb.bashrc >> ~/.bashrc
$ source ~/.bashrc

Copied!

步骤9:检查安装结果


若连接报错或执行SQL语句报错,请根据错误提示信息检查安装步骤,或咨询我们的技术支持。

  1. YashanDB不提供系统初始口令,需使用yasboot工具设置数据库sys用户的密码,以安装用户登录到服务器并执行如下命令设置密码。

    $ yasboot cluster password set -n newpasswd -c yashandb
    

    Copied!

  2. 使用yasql工具连接数据库,查看实例状态。

    $ yasql sys/password@192.168.1.3:1688
    SQL> SELECT STATUS FROM V$INSTANCE;
    
    STATUS        
    ------------- 
    OPEN        
    
    SQL> SELECT database_name FROM v$database;
    
    DATABASE_NAME                                                    
    ---------------------------------------------------------------- 
    yashandb
    

    Copied!

  3. (可选)创建数据库用户并赋权,更多操作请查阅用户管理

    SQL> CREATE USER sales IDENTIFIED BY sales;
    
    SQL> GRANT CONNECT TO SALES;
    

    Copied!

步骤10(可选):开启仲裁选主


若DN节点数量配置为2(即DN节点采用一主一备规格),需使用基于yasom的仲裁选主才能实现DN组内节点的主备自动切换。

相关文章
|
2月前
|
SQL
【YashanDB知识库】手工迁移Doris数据到崖山分布式
【YashanDB知识库】手工迁移Doris数据到崖山分布式
|
1月前
|
安全 网络安全 数据库
YashanDB分布式节点间SSL连接配置
本文介绍YashanDB分布式节点间SSL连接配置方法,确保通信安全。需统一为整个集群配置SSL,使用相同根证书签名的服务器证书,否则可能导致连接失败或数据库无法启动。文章详细说明了使用OpenSSL生成根证书、服务器私钥、证书及DH文件的步骤,并指导如何将证书分发至各节点。最后,通过配置数据库参数(如`din_ssl_enable`)并重启集群完成设置。注意,证书过期需重新生成以保障安全性。
|
2月前
|
SQL DataX HIVE
【YashanDB知识库】DataX迁移Hive到崖山分布式
本文来自YashanDB官网,介绍通过DataX将Hive数据迁移到YashanDB的实现方法。源环境为Hive 3.1.3,目标为YashanDB 23.2.3.100。文章提供了Hive与YashanDB的建表脚本、数据类型映射及DataX配置示例,包含reader和writer插件参数设置,并通过`datax.py`执行同步任务。内容详尽展示了数据迁移的全流程。
【YashanDB知识库】DataX迁移Hive到崖山分布式
|
1月前
|
SQL 网络安全 分布式数据库
YashanDB分布式部署
本文详细介绍了YashanDB在分布式环境下的安装与部署流程,以三台服务器为例(1个MN组、2个CN节点、1个DN组),涵盖主备配置。主要内容包括:生成部署文件(通过`yasboot package`命令)、执行安装、数据库部署、配置环境变量、检查安装结果等步骤。同时提供可选配置,如仲裁选主和用户管理,确保高可用性和性能优化。适合需要搭建分布式数据库集群的用户参考使用。
|
2月前
|
运维 Kubernetes Java
Koupleless 助力「人力家」实现分布式研发集中式部署,又快又省!
本文由仁励家网络科技(杭州)有限公司架构师赵云兴、葛志刚撰写,探讨了公司在优化HR SaaS解决方案时遇到的系统资源浪费和运维成本高的问题。通过引入Koupleless框架,成功将模块体积从500M缩减至5M以下,部署时间从6分钟缩短至3分钟,并大幅节省服务器资源。文章详细介绍了Koupleless的部署方案及优化措施,感谢Koupleless团队的专业支持,使人力家实现了多应用合并部署,降低了运维成本。
Koupleless 助力「人力家」实现分布式研发集中式部署,又快又省!
|
2月前
|
运维 Kubernetes Java
Koupleless 助力「人力家」实现分布式研发集中式部署,又快又省!
通过引入Koupleless框架,解决了多应用部署中资源浪费和运维成本高的问题,实现了模块瘦身、快速部署及流量控制优化,大幅降低了服务器资源占用和发布耗时,提升了系统稳定性和运维效率。最终,人力家成功实现了多应用的轻量集中部署,显著减少了运维成本。
 Koupleless 助力「人力家」实现分布式研发集中式部署,又快又省!
【YashanDB知识库】分布式LSC表修改字段
本文来自YashanDB官网,介绍了一种间接修改分布式LSC表字段的方法。通过重命名原表为备份表、重建新表调整字段长度、使用bulkload方式快速导入数据、验证记录数并删除备份表等步骤,实现将字段`area_name`从VARCHAR2(60)修改为VARCHAR2(100)。此方法高效且适用于分布式环境下的表结构调整。
|
3月前
|
Java 关系型数据库 MySQL
新一代 Cron-Job分布式任务调度平台 部署指南
简单易用、超低延迟,支持用户权限管理、多语言客户端和多租户接入的分布式任务调度平台。 支持任何Cron表达式的任务调度,支持常用的分片和随机策略;支持失败丢弃、失败重试的失败策略;支持动态任务参数。
133 31
|
3月前
|
人工智能 Kubernetes 异构计算
大道至简-基于ACK的Deepseek满血版分布式推理部署实战
大道至简-基于ACK的Deepseek满血版分布式推理部署实战
155 5

热门文章

最新文章