目  录

1 概述

2 部署环境及注意事项

2.1 部署架构示意图

2.2 环境说明

2.3 部署注意事项

3 自动部署

3.1 集群部署

3.1.1 术语说明

3.1.2 功能使用须知

3.1.3 部署管理平台

3.1.4 集群部署功能说明

3.2 单机部署

3.2.1 术语说明

3.2.2 功能使用须知

3.2.3 部署管理平台

3.2.4 单机部署组件安装

3.2.5 单机部署高可用搭建

3.2.6 单机部署启动程序

3.2.7 单机部署安装NDB SQL

3.2.8 实现免密登录说明

3.2.9 部署脚本说明

4 手动部署

4.1 计算节点服务器开启大页内存

4.2 单节点模式集群部署

4.2.1 计算节点

4.2.2 管理平台

4.2.3 配置库

4.2.4 存储节点

4.2.5 备份程序

4.3 HA（主备）模式集群部署

4.3.1 特殊说明

4.3.2 计算节点

4.3.3 Keepalived

4.3.4 高可用切换说明

4.4 NDB SQL服务

4.5 SeaSQL DRDS Listener组件

1 概述

本文档主要介绍部署SeaSQL DRDS 集群的部署流程。

在进行集群部署前均需要完成环境的配置，详情请参见2 部署环境。

部署SeaSQL DRDS 集群可以通过管理平台“集群部署”或“单机部署”功能进行自动安装部署，详情请参见3 自动部署，也可以通过命令方式手动安装，详情请参见4 手动部署。

 

2 部署环境及注意事项

SeaSQL DRDS集群部署对服务器、操作系统、依赖软件等有一定要求，不符合要求的环境部署出来的集群可能无法使用或不满足使用要求。建议部署前详细了解SeaSQL DRDS集群部署对环境的环境说明。

此文档将详细描述普通模式下，如何部署一套SeaSQL DRDS集群。若要了解开启灾备模式后，相较于普通模式，需要特殊注意的地方，请参考《H3C SeaSQL DRDS 跨机房容灾 功能使用手册》中“安装部署”章节。

2.1  部署架构示意图

图2-1 集群HA（主备）模式部署架构示意图

 

图2-2 集群负载均衡模式部署架构示意图

 

 

2.2  环境说明

·     服务器：生产环境推荐使用物理机，测试环境可使用虚拟机。若需要做性能测试则必须使用物理机，且提前为服务器配置hostname。

·     操作系统：x86架构cpu服务器推荐使用64 位的H3Linux K310 V113-x86_64(64bit) ；ARM架构cpu服务器推荐使用Kylin Linux Advanced Server V10 (64bit)；如需使用其他操作系统，在项目实施前需要进行充分验证操作系统与软件的适配性。

·     依赖软件：运行SeaSQL DRDS（分布式事务数据库）与SeaSQL Management（分布式事务数据库管理平台）需要依赖JAVA环境。

2.3  部署注意事项

·     安装集群前如服务器中已安装MySQL或MariaDB，需要卸载相关软件；

·     安装集群时，管理平台配置库、集群配置库和存储节点MySQL版本必须保持一致；

·     数据库对时间一致性要求非常高，安装集群前需将所有服务器时间调整和时钟源一致，集群安装成功后请确保相关ntp服务正常，所有服务器时钟一致；

·     MySQL5.6版本已废弃，建议使用MySQL5.7或MySQL8.0，如需使用MySQL5.6版本，请用户自行提供相关版本并且手动安装集群；

·     如需安装灾备机房，要求中心机房数据节点和配置库模式为双主模式，且要求安装灾备机房的MySQL版本、binlog格式、数据节点类型、配置库和中心机房保持一致；

·     管理平台界面在线安装集群时，不允许同时安装两套或者多套集群。

·     listener功能建议不要安装使用；

·     NDB功能建议不要安装使用；

·     针对ARM版本，在部署drds集群前，查看麒麟系统的大页是按照2m一个算的还是512m一个算的。如果是512m一个，就修改为2m一个。步骤：1. 修改/etc/default/grub 中 GRUB_CMDINE_LINUX ，在其值中添加 default_hugepagesz=2M；2. 更新引导设置，执行命令： grub2-mkconfig -o /boot/efi/EFI/neokylin/grub.cfg；3. 重启操作系统  reboot；4. 查看大页，确认Hugepagesize为2048Kb， grep -i huge /proc/meminfo

3 自动部署

自动部署为管理平台在界面中支持自动化安装部署计算节点集群的功能。目前管理平台从V2.5.0及以后拥有“集群部署”、“单机部署”两个自动化安装功能。

·     “集群部署”适合从0开始一次性部署整套计算节点集群的场景。

·     “单机部署”适合再已部署好的集群上新增个别集群组件的场景。

3.1  集群部署

集群部署每次部署任务是以一套集群为单位进行，一次部署最少需要包含：计算节点、配置库、keepalived（主备节点模式需要安装），其他组件：存储节点、LVS（多节点模式）、NTPD可根据需要安装。支持“单节点、主备节点、多节点”不同集群模式的安装。安装完的集群自动根据配置搭建好高可用、自动启动。

3.1.1  术语说明

集群部署相关术语请参照《H3C SeaSQL DRDS 管理平台 名词解释手册》。

3.1.2  功能使用须知

·     集群部署支持但不限于H3C Linux K310 V113，Kylin v10；MySQL 5.7\8.0； SeaSQL DRDS2.5。

·     超过2EB的硬盘可能会出现计算错误。

·     不支持一台服务器上安装多个计算节点或多个管理平台或多个备份程序。

·     建议添加干净的操作系统环境服务器。

·     服务器的SSH信息须使用root权限的用户进行配置。

·     添加的服务器要求已配置可用的yum源或安装脚本目录下有对应操作系统版本的iso镜像文件。

·     安装部署包名称默认以“auto_hotdbinstall”开头，请不要随意更改服务器下部署包名称。

·     程序默认上传部署包存放路径为/usr/local/hotdb。

·     MySQL默认安装以自动部署auto包内自带版本为准，如需要安装其他版本，自行在自动部署auto包内替换相关安装包即可。

·     管理平台在部署集群前需确认在管理平台服务器以下任一目录中存在集群安装部署包资源。集群部署时会在以下目录寻找资源包上传至目标服务器/usr/local/hotdb路径下。（查找优先级按以下为准）

a.     /opt

b.     /opt/hotdb

c.     /usr/local

d.     /usr/local/hotdb

·     一键部署安装包下载过程中可能存在一些损坏，此时进行部署可能导致部署出错。故在管理平台版本为2.5.6.1（包含）版本以上，增加了完整性校验功能，对上传的安装包进行MD5值校验。即在上传部署安装包时，需同步上传当前安装包对应的MD5值文件至服务器相同目录下，如图3-1所示。

图3-1 上传部署安装包

 

·     集群部署过程中可能会出现各种异常，故从257版本开始，增加了重试入口，对部署过程中出现异常的环节可进行重试

3.1.3  部署管理平台

(1)     将部署安装包和对应MD5值文件上传至服务器，并解压到指定目录

#mkdir /usr/local/hotdb

#tar -zxvf auto_hotdbinstall_HotDB2.*.tar.gz -C /usr/local/hotdb/

(2)     执行安装脚本安装管理平台

#cd /usr/local/hotdb/Install_Package/

#sh hotdbinstall_v*.sh --ntpdate-server-ip=182.92.12.11 --mysql-version=5.7 --hotdb-config-port=3316 --hotdb-version=2.5  --install-hotdb-server-management=yes

(3)     查看安装日志获取安装进度

# tail -f /usr/local/hotdb/Install_Package/hotdbinstall.log

(4)     日志打印如下标记则为安装成功正常结束

[INFO] hotdbinstall finished without error, but you should check if there is any warnings

(5)     启动管理平台

# sh /usr/local/hotdb/hotdb-management/bin/hotdb_management start

(6)     浏览器打开管理平台

启动成功后 打开浏览器输入：http://服务器的IP地址:3324/page/index.html

成功打开页面后登录账号到管理员界面。（管理员用户名/密码默认为admin/admin）

3.1.4  集群部署功能说明

 

1. 添加集群部署任务

admin用户登录管理平台后进入“集群管理->计算节点集群”，点击【集群部署】按钮进入集群部署功能页面。

图3-2 进入集群部署功能页面

 

2. 选择部署的集群模式

集群分为单节点、主备节点、多节点三种模式，选择好集群模式后点击【参数配置】按钮进入集群部署参数配置页面。

图3-3 进入集群部署参数配置页面

 

集群模式说明

·     单节点：单节点指整个集群中只有一个计算节点的集群模式。无需安装Keepalived或LVS等高可用组件。

图3-4 单节点模式集群

 

·     主备节点：主备模式也称HA模式，即通过Keepalived组件进行高可用搭建的集群模式。在集群中存在主、备两个计算节点。

¡     主备节点模式的集群，需要填写2台服务器的配置信息。

¡     Keepalived的virtual_ipaddress（简称VIP）要求为没有被服务器或其他应用所占用且和计算节点服务器在相同网段上。格式为VIP+子网掩码长度，例：192.168.200.120/24。

¡     virtual_router_id的值可自行在范围【1-255】选定一个值，但该值要求在集群使用的网段内是唯一的，即不与其他应用服务选择的值冲突。

¡     主备Keepalived服务器网关设备名称是Keepalived所在服务器的网卡设备名称，该名称必须填写正确，格式为网卡名称+:1（例：“eth0:1”）。（网关设备名称可通过“ip a”命令查看）

图3-5 主备节点模式集群

 

·     多节点：多节点模式也叫作负载均衡模式，是通过LVS组件或其他负载均衡组件来控制分发业务流量到集群中的多个计算节点上的一种架构模式。多节点模式中计算节点个数不能低于3个或超过7个。

¡     多节点模式中，计算节点个数默认为3个，且计算节点版本必须为2.5。

¡     集群网段为计算节点安装服务器所在网段，格式为：网段+子网掩码长度，例：192.168.200.0/24。

¡     通信端口为集群内各计算节点进行通信时所用端口，默认为3326。无特殊要求时不建议修改。

¡     LVS是多节点模式中实现负载均衡的组件，也可以关闭【安装】选择其他负载均衡方式代替LVS。

¡     LVS_vip为LVS组件中所配置的虚拟IP地址（简称VIP），要求必须为没有被服务器或其他应用所占用且和计算节点服务器在相同网段上。格式为VIP+子网掩码长度，例：192.168.200.120/24。

¡     virtual_router_id的值可自行在范围【1-255】选定一个值，但该值要求在集群使用的网段内是唯一的，即不与其他应用服务选择的值冲突。

¡     lvs_net_interface_name是LVS组件所在服务器的网卡名称，该名称必须填写正确，格式为网卡名称+:2（例：”eth0:2”）。（网关设备名称可通过“ip a”命令查看）。

图3-6 多节点模式集群

 

3. 集群部署参数配置

(1)     计算节点参数

 

图3-7 计算节点参数说明

 

¡     计算节点个数默认为3，设置时不能小于3或大于7个。

¡     集群名称会自动生成，格式为：Group+四位随机数，可根据实际情况修改。

¡     可根据实际需要查看是否要安装NDB SQL服务，如果安装则要求计算节点版本必须大于等于V2.5.2。

¡     集群网段为计算节点所在服务器的网段范围，格式为：网段+子网掩码长度，例：192.168.200.0/24。

¡     通信端口为集群内各计算节点进行通信时所用端口，默认为3326，无特殊要求不建议修改。

¡     计算节点名称会自动生成，格式为：计算节点+编号,可根据实际情况修改。

¡     登录方式为管理平台连接部署目标服务器的方式，默认使用“密码”方式登录，如果使用“免密”方式则要求管理平台服务器与目标部署服务器之间需要打通免密通道，具体实现方式可参照“实现免密登录说明”。

¡     当“登录方式”为“密码”方式时需要输入连接目标服务器的SSH信息包括：SSH用户、SSH密码。端口号默认为22，无特殊要求一般无需修改。

¡     堆内存默认为4G，当设置大于8G时，会提示要求开启“G1垃圾回收器”。该参数输入范围【1-64】G。

¡     直接内存默认为24G，参数输入范围【1-64】G。

¡     服务端口与管理端口默认为“3323,3325”，无特殊要求可直接使用默认值。若修改且安装成功后计算节点的server.xml配置文件对应参数也会同步修改。

¡     点击【测试连接】可测试目标服务器的连接是否正常，判断输入的SSH信息是否可用。

(2)     配置库参数

 

¡     安装的计算节点配置库实例可选择模式有：单库、双主、MGR，推荐使用双主模式；安装平台配置库实例仅可选择：从库、双主备库。

¡     配置库版本会因模式而变动，选择MGR模式时版本必须为5.7或8.0。

¡     选择MGR模式时可编辑MGR模式下的实例数量，默认3个，编辑时不能少于3个或大于9个。选择其他模式则无数量限制。

¡     创建高权限用户开关，开关默认打开即配置库MySQL实例安装成功后会默认生成一个“hotdb_root”的账户，该账户拥有MySQL实例的所有权限。

¡     实例端口号默认为3306，可根据实际情况自行修改。

¡     “磁盘设备名称”与“数据目录”参数为选填项，为空时程序会自动为“磁盘设备名称”赋予空值，“数据目录”赋予默认值“/data”。关于参数详细说明，可参照“3.2.9  部署脚本说明”。

¡     【更多参数】可为当前部署的MySQL实例设置更多选项参数，当参数的输入框为空时安装脚本会自行计算处理并给予默认值，无特殊要求时不建议修改。若需要使修改的参数适用到其他部署的配置库实例上可勾选“更多参数同步到其他配置库实例中”选项。

(3)     LVS参数

 

¡     集群部署支持不安装LVS相关组件，当选择到不安装时，则不需要填写LVS配置参数

¡     “LVS_vip”填写的IP，要求必须为没有被服务器或其他应用所占用的且和计算节点服务器在相同网段上。格式为VIP+子网掩码长度，例：192.168.200.120/24

¡     “virtual_router_id的值可自行在范围【1-255】选定一个值，但该值必须在集群使用的网段内是唯一的，即没有与其他服务程序选取的值冲突。

¡     主备“lvs_net_interface_name”是LVS所在服务器的网关设备名称，该名称必须与实际服务器上显示的一致（可通过 ip a命令查看）,格式为：网关设备名称+“:2”（例如：”eth0:2”）。

(4)     存储节点参数

 

¡     存储节点的版本可选择“5.6、5.7、8.0”，默认为5.7。

¡     节点个数为集群中的数据节点个数，设置时不能超过128。

¡     节点类型为数据节点下关联的存储节点复制关系类型包含：单库、主从、双主、MGR，推荐使用双主模式。

¡     点击【生成】按钮可快速按照选填写的参数生成存储节点配置信息。

¡     “创建高权限用户”请参照配置库该处说明。

¡     “节点名称”为数据节点名称，默认根据“节点个数”自动生成，用户可自行修改。

¡     “存储节点类型”默认根据选择的“节点类型”进行生成。例：“节点类型”为“主从”，则在每个数据节点下分别生成一个“主库”、一个“从库”类型的存储节点记录。

¡     “安装监听程序”开关默认打开，即在存储节点所在服务器上安装SeaSQL DRDS Listener组件。安装监听程序可用于解决计算节点集群模式的性能线性扩展问题。若用户暂不使用监听程序，可手动关闭。

¡     “监听端口”即监听程序启动端口，默认值为3330，可手动修改。一个存储节点服务器上部署一个监听程序需要配置一个未被占用的端口作监听端口。一个存储节点服务器下仅支持通过集群部署部署一个监听程序，即同一个主机名只能对应配置同一个监听端口。若关闭“安装监听程序”，会联级置灰“监听端口”，不可编辑。

¡     “监听程序服务端口”即计算节点通过监听程序连接存储节点的端口，默认值为4001，若一个监听程序需要监听多个存储节点，则需要为其分别填写不同的服务端口。若关闭“安装监听程序”，会联级置灰“监听程序服务端口”，不可编辑。

¡     “安装备份程序”开关默认打开，即在存储节点所在服务器上安装HotDB Backup备份程序。

¡     “关联管理平台IP”，默认填充当前执行集群部署任务的管理平台地址。该地址为备份程序启动时需要指定所服务的管理平台地址。

¡     点击操作中的“增加”、“删除”可新增或去除一行存储节点配置记录。

¡     存储节点数量过多时可考虑使用“导入”方式进行配置。导入前须先下载模板，再按照模板说明进行填写配置信息，完成后再导入管理平台中。若填写有误时，程序会显示导入失败与失败详细信息。

(5)     时间同步参数设置

 

¡     时间同步主要是为集群所有服务器指定NTP时间服务地址，保证集群中的服务器时间保持一致。

¡     默认在主计算节点或多节点中的第一个计算节点所在服务器上安装NTP服务程序。若集群中已有可用的NTP服务，则可取消安装。

¡     集群中其他服务器时间同步地址默认指向已安装有NTP服务器的计算节点服务器地址，若计算节点不安装NTP服务器则其他服务器与计算节点服务器所指向的时间同步地址保持一致。

 

4. 参数校验并保存

 

·     仅保存：点击【仅保存】按钮，程序不会验证配置参数输入的合法性和完整性，仅校验必填项是否已填写。

·     检查并保存：点击【检查并保存】按钮，程序会校验配置参数的合法性和完整性，并推送一键部署安装包和对应的MD5值文件到目标服务器上以验证是否符合集群部署的要求，不符合要求时会弹窗提示。开始部署前的集群都必须通过【检查并保存】才能进入安装环节。

 

图3-8 失败提示

 

若集群配置参数检测未通过，需要根据报错情况进行相应的修改，然后再进行校验。

如果因为服务器硬件配置不满足要求导致未通过检测的，建议先将配置参数通过【仅保存】按钮先保存下来，然后根据提示调整目标服务器的硬件配置或更换目标服务器，然后再进行校验。

·     已保存但未开始安装的集群在“集群管理”页面显示时是未开启监控的，且集群部署信息各栏信息显示“已配置”字样，如下图所示。

 

·     已保存但未开始安装的集群，通过“部署拓扑”按钮进入后，显示如下图所示。虚线图标代表已配置好但未开始安装的组件。

 

5. 开始部署

 

(1)     点击【开始部署】进入安装进程

¡     若未通过校验的集群点击【开始部署】则提示不允许进入部署

¡     通过“检查并保存”的集群，若在【开始部署】时计算节点集群中任一服务器上的安装包发生了损坏，即检测到安装包当前的MD5值和原MD5值不一致，也会弹窗提示：

 

¡     任一步骤操作发生异常，总控会提供重试入口：

 

¡     进入重试入口重新执行当前步骤：

 

 

(2)     通过部署进度条查看当前部署状态。

(3)     部署日志会实时输出到控制台中，总控制台可查看所有服务器部署完成情况。具体每台服务器控制台可单独查看对应服务器部署时的脚本执行日志信息。

(4)     可点击右上角放大按钮，全屏查看。

(5)     安装完成后可在总控制台中看到“集群部署成功”字样。

6. 部署完成

 

(1)     部署成功的集群在“集群管理”页面中会自动开启监控，“集群部署信息”各栏显示各组件的运行状态信息。

(2)     点击【部署拓扑】按钮进入部署拓扑图页面可查看到拓扑图中的图标都变成实线。

7. 实例密码修改

 

已部署完成的集群安装的配置库与存储节点实例都会自动生成一些账户。具体如下：

·     配置库实例生成hotdb_config、dbbackup、repl、hotdb_root（视是否开启创建高权限账户开关而定）。

·     存储节点实例生成hotdb_datasource、dbbackup、repl、hotdb_root（视是否开启创建高权限账户而定)。

 

实例密码修改分为：配置库实例密码修改、存储节点实例密码修改两部分。

(1)     可通过点击操作栏中【密码修改】按钮进行单个用户密码修改，也可以通过【一键修改密码】按钮批量修改用户密码。

(2)     提交密码修改后实例密码修改页面会进行页面加载，此时请勿刷新页面或进行其他操作。

批量修改用户密码是按照用户角色进行划分显示，例如配置库实例中对repl账户修改密码，则配置库所有实例中的repl账户密码都同步修改。存储节点也如此。

对于具有复制关系的实例，修改用户的密码会将与其有复制关系的实例的用密码一同修改，例如具有MGR关系的存储节点实例（192.168.210.81：3311，192.168.210.82：3311，192.168.210.83：3311），修改192.168.210.81：3311实例上的hotdb_root用户密码为admin，程序会将另外两个实例的hotdb_root用户修改为admin。

3.2  单机部署

单机部署功能可以为用户在已有集群中继续添加新的组件。此外它也可以从零开始部署一套新的集群，因为除安装功能以外它还提供高可用搭建、一键启动等功能，但相对“集群部署”功能来说“单机部署”更适合部署单个组件。

3.2.1  术语说明

单机部署相关术语请参照《H3C SeaSQL DRDS 管理平台 名词解释手册》

3.2.2  功能使用须知

单机部署功能使用须知同集群部署的“功能使用须知”一致，参照该描述即可。

3.2.3  部署管理平台

单机部署属于管理平台中的功能，在使用前需要先安装好管理平台。安装步骤说明请参照集群部署功能的“部署管理平台”。

3.2.4  单机部署组件安装

 

1. 添加部署任务

通过admin用户登录到管理平台后，选择“计算节点集群->单机部署”点击【添加部署任务】

 

在添加部署任务时，服务器角色可选择“计算节点”或“存储节点服务器”，服务器信息部署方式可选择“根据平台提供的选项部署”或“直接输入脚本参数进行部署”。勾选不同选项需配置的信息不同，请根据实际需求自行选择。

2. 部署计算节点与配置库

服务器信息部署方式选择“根据平台提供的选项部署”。

 

(1)     服务器角色选择“计算节点”时，“软件安装信息及配置信息”中默认自动勾选“计算节点服务、Keepalived、配置库MySQL实例、NTPD服务”。该角色选择只为引导安装对实际安装不会产生影响，用户也可根据实际情况选择其他组件。

(2)     目标部署服务器可通过“密码、免密”两种方式登录，若使用免密则需要提前手动建立服务器间的免密通道，具体参见“实现免密登录说明”。使用“密码”方式登录则需要输入SSH连接用户名与密码。

【说明】使用密码方式登录时，为了保障SSH信息安全管理平台只会保存24小时，过期后若需要重新连接目标服务器则需要点击【编辑】重新保存。

(3)     点击【测试连接】可测试管理平台服务器与目标部署服务器间是否正常可连接。

 

(4)     计算节点可选择版本有“2.4、2.5”，2.4代表安装2.4.X版本的计算节点，具体版本号需以安装包内提供的为准。用户可根据实际情况进行选择。

¡     计算节点的主备选择需要根据当前规划的实际情况，主备模式中需要有一个主计算节点服务，一个备计算节点服务。

¡     服务端口与管理端口默认为“3323、3325”，如无特殊要求可直接使用默认值。

¡     若计算节点与配置库安装在同一台服务器，则配置库相关信息可以直接使用默认值但配置库地址IP需要填写实际值；若计算节点与配置库不在同一台服务器，则配置库信息需要根据实际情况做修改。

¡     堆内存与直接内存默认为“4G、24G”，用户也可以根据实际情况进行调整但输入范围不得超过【1-64】G。当堆内存大于8G时，建议打开G1垃圾回收器。

 

(5)     主备模式的集群，在计算节点服务器上必须安装Keepalived组件，否则计算节点无法搭建高可用。

¡     Keepalived的virtual_ipaddress（简称VIP）要求为没有被内网服务器或其他应用所占用且和计算节点服务器在相同网段上。格式为VIP+子网掩码长度，例：192.168.200.120/24。此处我们填写之前规划的VIP地址“192.168.200.112/24”。

¡     virtual_router_id的值可自行在范围【1-255】选定一个值，但该值必须在集群使用的网段内是唯一的，即未与其他服务程序选取的值产生冲突。

¡     keepalived_net_interface_name是Keepalived所在服务器的网卡名称，该名称必须填写正确，格式为网卡名称+ :1  例：”eth0:1”。（网关设备名称可通过“ip a”命令查看）。

 

(6)     配置库MySQL实例可与计算节点安装在同一台服务器上，也可以分开安装。默认与计算节点安装在一台服务器上。

¡     版本为配置库MySQL实例的版本号，可选择“5.6、5.7、8.0”。

¡     MySQL安装参数中需要关注“MySQL实例端口”，默认3306，若该默认值被占用需要修改端口。

¡     其他参数如无特殊要求可直接使用默认值，为空的输入框程序会根据服务器情况自动计算并给出默认值。

¡     若同一台服务器上同时安装配置库与存储节点，则配置库参数配置只能修改“MySQL实例端口”参数，其他更多参数只能在存储节点中设置。（原因：一台服务器只能设置一份MySQL参数）

 

(7)     当服务器中安装了主计算节点服务时，“NTPD服务”会自动勾选安装，若已有NTP时间服务器，此处可去除勾选安装。

¡     每台目标部署服务器都需要指定时间同步地址。

 

(8)     点击【保存信息】则将配置信息保存可供后期安装、点击【开始安装】则直接进入安装进程。

 

¡     首次安装时需要将一键部署安装包和其对应的MD5值文件从管理平台服务器上传至目标部署服务器，所以必须点击【确定上传】。关于管理平台服务器存放资源包说明请参照“集群部署的功能使用须知”最后一条

¡     若安装包在上传过程中发生了损坏，在“确定上传”时会检测到安装包当前的MD5值和其对应的MD5值不一致，会跳出弹窗提示：

 

·     若手动将一键部署安装包和其对应的MD5值文件上传至目标服务器/usr/local/hotdb中或之前已完成包资源上传，则可点击【开始安装】跳过上传安装包的动作，但手动上传包需保证包的完整性

 

·     进入安装进程后，页面底部会实时输出安装日志与安装结果。安装日志“hotdbinstall.log”在目标服务器“/usr/local/hotdb/Install_Package”目录下。

·     安装过程中如果有error信息会用红色字体标识，warning信息用橙色标识。出现error信息则意味着此次安装任务失败，需要根据提示信息进行修改再尝试安装。

·     成功安装完成可以根据安装日志是否出现：“hotdbinstall finished without error, but you should check if there is any warnings”字样判断。也可以根据右侧安装结果判断。

·     备计算节点的安装可通过克隆之前主计算节点的安装任务，然后修改“主机名”、“计算节点角色”等参数。其他参数视实际情况进行修改。

·     注意安装备计算节点时无需勾选“NTPD服务”只需将“服务器时间同步地址”填写成主计算节点服务器IP地址即可或指向内网中已安装NTPD服务的IP地址。

3. 部署存储节点实例

服务器信息部署方式选择“根据平台提供的选项部署”。

 

服务器角色选择“存储节点服务器”时，需填写存储节点的目标安装服务器SSH信息。

·     根据角色，安装组件将自动勾选“存储节点MySQL实例、存储节点监听程序、存储节点备份程序”。

·     存储节点监听程序默认端口为3330，可自行调整。若不安装监听程序，可手动取消勾选。后续以取消勾选安装监听程序为示例。

·     根据部署要求在192.168.200.48中安装4个存储节点MySQL实例，所以“实例数”选择4。

·     服务器时间同步地址填写主计算节点服务器IP（192.168.200.45）。

 

(1)     点击【开始安装】并上传安装包及其对应的MD5值文件至存储节点目标部署服务器中。

(2)     可查看日志安装的实时进度。

(3)     通过【克隆】按钮将部署存储节点的任务克隆到“192.168.200.48”中，修改SSH信息即可进入安装。

4. 使用脚本方式进行部署

服务器信息部署方式选择“直接输入脚本参数部署”。

 

使用脚本部署时，也需提前将安装包存放于当前平台服务器的/opt、/opt/hotdb、/usr/local、/usr/local/hotdb任意目录下。

(1)     部署方式勾选“直接输入脚本参数部署”，注意若直接使用脚本进行部署，无法通过平台进行高可用关系搭建及服务管理操作，均需人工手动进行。

(2)     “点击查看部署参数列表”：可查看到当前支持的所有部署参数的信息。

(3)     脚本命令框输入执行脚本，点击【开始执行】按钮。

(4)     脚本开始执行后，页面底部会实时输出部署日志，部署日志位于目标服务器的“/usr/local/hotdb/Install_Package/hotdbinstall.log

【说明】：

¡     日志中error/warning信息分别会以红色、橙色标识

¡     脚本开始执行后，不允许修改执行脚本命令，页面【开始执行】、【保存信息】会置灰显示。

(5)     若部署日志出现：“hotdbinstall finished without error, but you should check if there is any warnings”字样则代表部署成功。

(6)     当用户填写的执行脚本命令与hotdbinstall不相关时，点击【开始执行】之后给到提醒：请填写正确的部署脚本名称。

(7)     点击【保存信息】或【开始执行】，均可将当前信息保存至单机部署列表。

¡     安装软件列显示：使用脚本方式部署暂无软件列表

¡     数量：使用脚本方式部署时统一展示“-”

¡     安装状态：

¡     保存信息：未安装

¡     脚本开始执行后：正在安装

¡     脚本执行无异常：无异常信息

¡     启动状态：使用脚本方式部署暂无状态监控

 

3.2.5  单机部署高可用搭建

高可用搭建可在单机部署功能中为已安装好的组件进行高可用自动搭建服务，包括计算节点高可用、存储节点高可用、配置库高可用搭建。

1. 计算节点高可用搭建

 

(1)     点击【高可用搭建】按钮进入高可用搭建页面，在“计算节点高可用搭建”模块点击【添加】可弹出添加计算节点高可用的配置窗口。

¡     弹窗中选择“高可用”则为计算节点搭建HA高可用关系，若选择“单实例”则表示计算节点为单节点模式。

¡     集群名称为主备计算节点所在集群的名称，此处可自定义命名但不允许与已有集群名称重复。

¡     Master为主计算节点，若之前主计算节点安装成功且未经过搭建的则下拉框会显示出来。

¡     Backup为备计算节点，若顶部选择的为“单实例”则Backup无需选择。

¡     Master名称与Backup名称为计算节点的备注名称，可自定义命名但不允许与已有的计算节点重名。

(2)     点击【保存】即开始为主备计算节点搭建高可用关系。

 

2. 存储节点高可用搭建

 

(1)     点击“节点高可用搭建”模块中【批量添加】按钮，若计算节点高可用未搭建或没有搭建的历史记录，则点击【批量搭建】会提示“请先搭建一个计算节点集群”（因为存储节点高可用搭建需要选择所属哪个计算节点集群）。

¡     添加存储节点高可用配置需要先选择“计算节点集群”，可选择刚搭建好的计算节点集群。

¡     节点名称为存储节点所属的数据节点名称（dataNode）,可自定义命名但不能与已有数据节点重名。

¡     复制模式指同一数据节点下的各存储节点以何种方式存在，目前支持“单库、主从、双主”三种模式。

¡     当前数据节点支持6种模式的复制架构：主从、双主、双主带从、一主多从、级联从机、灾备关系主从或双主。

¡     当复制架构为双主带从、一主多从或级联从机三种场景时，高可用搭建可分多次进行，也可以一次性进行（点击“+”即可新增配置），如下：

 

¡     支持GTID和Binlog两种方式进行复制关系的搭建，若待搭建的存储节点部分开启了GTID，部分没有开启，则默认使用Binlog模式进行。

(2)     点击【开始搭建】，即可为存储节点搭建复制关系,若涉及数据不一致的情况，需要重导数据，在开始搭建时会有如下提示：

 

 

存储节点搭建完成会以数据节点为单位显示搭建记录，对于搭建失败的记录将鼠标放置在搭建失败状态上即可以显示具体失败原因，也可以点击「编辑」按钮修改参数进行再次搭建

 

3. 配置库高可用搭建

 

(1)     选择已安装好的配置库实例，并选择所属集群，点击【搭建】按钮开始搭建。

(2)     搭建完成后，程序会将具有双主关系的配置库地址修改到server.xml文件中。

 

3.2.6  单机部署启动程序

启动程序主要为已安装好的组件或已搭建好高可用的集群进行一键启动服务。目前可启动的服务主要有：“计算节点、Keepalived、备份程序、管理平台”。

“存储节点MySQL实例、配置库MySQL实例、NTPD服务”在程序安装完成后会直接启动，无需再次启动。

 

(1)     进入启动程序页面可通过单机部署页面中的【启动程序】按钮，也可以在高可用搭建完成后右下角直接点击【启动程序】。

 

¡     启动程序页面显示部署任务页面中所有安装成功的服务器记录，同时根据高可用搭建历史记录对已搭建主备的服务器做合并显示。

(2)     勾选可选择需要启动的组件，去除勾选则不进行启动。

¡     第一组记录为具有计算节点高可用搭建记录的集群，进行启动时若打开“自动生成基础配置”开关则一键启动程序会将计算节点集群、数据节点、存储节点以及默认生成的记录信息写入管理平台的配置库中，用户登录管理平台后便可直接查看无需重新添加配置。

¡     第二、三组为无计算节点高可用搭建记录的集群，进行启动时不会生成任何配置信息。

注：因为没有配置所属的计算节点集群，所以无法生成信息，启动好后需用户手动添加到管理平台内。

 

(3)     若启动项中包含存储节点备份程序即“HotDB Backup”，则会有”启动参数设置”的弹窗让用户指定备份程序启动时关联的管理平台IP地址。

¡     “备份程序IP”为需要启动的备份程序所在服务器IP地址。

¡     “管理平台IP地址”为备份程序启动时关联的管理平台IP地址（可选择当前正在使用的管理平台IP地址）。

 

(4)     点击【一键启动】进入程序启动与配置生成进程。

3.2.7  单机部署安装NDB SQL

若已安装好计算节点，但后期需要追加安装NDB SQL服务则可通过单机部署功能进行操作。相关操作步骤以及注意事项如下所述：

1. 使用须知：

·     使用单机部署功能为已有计算节点单独安装NDB SQL需满足集群中的计算节点是通过线下手动方式进行部署的，而未使用集群部署或单机部署功能。

·     若计算节点是通过集群部署或单机部署方式进行部署的，后期需要追加NDB SQL功能目前只能通过线下手动安装的方式进行。

·     NDB SQL必须与计算节点安装在同一台服务器上且计算节点版本不低于V 2.5.2。

2. 操作步骤：

 

(1)     填写计算节点的服务器地址以及SSH连接信息。

(2)     勾选NDB SQL服务，并注意红色字体提示。

(3)     填写与计算节点安装时指定的时间同步地址一致的值。

3.2.8  实现免密登录说明

 

免密登录需要在两台服务器之间建立免密通道，具体操作如下：

(1)     在192.168.190.186的服务器上执行ssh-keygen,连续按3次回车，完成生成公钥和私钥,其中id_rsa为私钥，id_rsa_pub为公钥，到/root/.ssh目录下可看到刚刚命令生成的私钥和公钥文件。

 

(2)     输入ssh-copy-id目标服务器的IP，再输入目标服务器的密码，就可以将公钥传到目标服务器

 

(3)     在192.168.190.187服务器上查看从192.168.190.186服务器上传送过来的公钥文件“authorized_key”。

 

(4)     测试不需要输入密码直接从192.168.190.186服务器ssh 到192.168.190.187服务器是否能够成功登录。

 

3.2.9  部署脚本说明

脱离管理平台您也可以直接使用安装脚本进行安装，在hotdbinstall.sh脚本后添加--xxx=xxx的方式使用。

1. 脚本参数说明

表3-1 脚本参数说明

参数名称	参数说明
dry-run	只做检查，不做任何修改，可选范围"yes" "no"，默认"no"
hotdb-version	指定HotDB大版本号，可选范围"2.4" "2.5" "zabbix"，默认"2.4"
install-hotdb-server	是否安装HotDB-server，可选范围"yes" "no"，默认"no"
install-ndbsql	是否安装ndbsql，可选范围"yes" "no"，默认"no"
install-hotdb-listener	是否安装HotDB-listener，可选范围"yes" "no"，默认"no"
--listener-heap-mem-size-gb	如果指定，会帮助将SeaSQL DRDS Listener启动脚本中堆内存大小由4G修改为指定值，默认不修改
--listener-max-direct-mem-size-gb	如果指定，会帮助将SeaSQL DRDS Listener启动脚本中直接内存大小由24G修改为指定值，默认不修改
hotdb-use-g1	如果指定，会帮助将hotdb启动脚本修改为使用G1垃圾回收器，默认不修改
hotdb-heap-mem-size-gb	如果指定，会帮助将hotdb启动脚本中堆内存大小由4G修改为指定值，默认不修改
hotdb-max-direct-mem-size-gb	如果指定，会帮助将hotdb启动脚本中直接内存大小由24G修改为指定值，默认不修改
install-hotdb-server-management	是否安装HotDB-server-management，可选范围"yes" "no"，默认"no"
install-hotdb-backup	是否安装HotDB-backup，可选范围"yes" "no"，默认"no"
mysql-version	指定MySQL大版本号，可选范围"5.6"、"5.7"、"8.0"，默认"5.6"
mysql-port-list	指定要安装的MySQL数据源端口列表，逗号分隔，要求递增顺序排列，示例："3306,3307,3308,3309"，默认为空
hotdb-config-port	指定要安装的配置库端口列表，不可以和MySQL数据源端口冲突，默认为空
hotdb-config-init	是否要在hotdb-config-port指定的实例初始化hotdb_config库，可选范围"yes" "no"，默认安装HotDB-server时为yes，不安装HotDB-server时为no。
mysql-data-diskname	指定用于MySQL数据目录的磁盘设备名称，如果该设备没有挂载，且没有被格式化过，将自动格式化此设备并挂载到数据目录，默认为空
mysql-data-rootdir	指定要使用的MySQL数据目录根目录，默认"/data"，必须是绝对路径
rename-datadir-before-initdb	指定在初始化数据库前，是否重命名可能存在的旧数据目录，默认为"yes"
server-id-perfix	指定server-id使用的前缀，要求为小于429496的数字，默认自动计算，但不保证绝对无冲突
character-set-server	指定字符集，可选范围"latin1" "gbk" "utf8" "utf8mb4"，默认"utf8mb4"
collation-server	指定校对集，可选范围"latin1_swedish_ci" "latin1_bin" "gbk_chinese_ci" "gbk_bin" "utf8_general_ci","utf8_bin" "utf8mb4_general_ci" "utf8mb4_bin"，默认值为配置的字符集的默认校对集
innodb-buffer-pool-size-mb	单位为MB的innodb-buffer-pool-size大小，默认自动计算
innodb-log-file-size-mb	单位为MB的innodb-log-file-size大小，默认自动计算
innodb-data-file-size-mb	单位为MB的ibdata文件大小，默认"4096"
innodb-io-capacity	指定innodb-io-capacity的大小，默认自动计算
innodb-flush-log-at-trx-commit	指定innodb-flush-log-at-trx-commit设置，默认"2"
sync-binlog	指定sync-binlog的设置，默认"10"
binlog-format	指定binlog-format的设置，可选范围"MIXED" "ROW"，默认"MIXED"
gtid-mode	是否启用gtid，可选范围"on" "off"，默认"on"
rpl-semi-sync-enabled	是否启动半同步复制，可选范围"on" "off"，默认"on"
mgr-group-name-list	MySQL端口号:MGR组UUID:MGR本地端口号列表，逗号分隔，如果提供该参数，将为对应端口打开MGR，例如"3306:540c2b46-5d73-11e8-ad9b-00a0c9000000:33060,3308:5f5c1e2d-5d73-11e8-ad9b-00a0c9000000:33080"，默认为空。（注意，仍然需要在mysql-port-list、hotdb-config-port中指定欲创建的MySQL实例）
mgr-group-local-ip	MGR本地端口绑定的本地IP地址，默认自动计算。
mgr-group-seeds-list	MySQL端口号:MGR组成员IP:端口逗号分隔列表，斜杠分隔，如果提供该参数，将在my.cnf文件中对应端口添加该值，默认为空，例如"3306:192.168.200.101:33060,192.168.200.102:33060,192.168.200.103:33060/3308:192.168.200.101:33080,192.168.200.102:33080,192.168.200.103:33080"
creat-hotdbroot-in-mysql	是否在MySQL中创建hotdb_root用户，用户拥有所有权限，并且可以从任意位置连接，默认密码hotdb_root，可选范围"yes" "no"，默认"no"
install-keepalived	是否安装keepalive，可选范围"master" "backup" "no"，默认"no"
keepalived-vip-with-perfix	如果指定，会帮助将keepalive配置中的vip由192.168.200.140/24替换为该值，默认不修改
keepalived-virtual-router-id	如果指定，会帮助将keepalive配置中的virtual-router-id由151替换为该值，默认不修改
keepalived-net-interface-name	如果指定，会帮助将keepalive配置中的vip设备名称由eth0:1替换为该值，默认不修改
install-lvs	是否安装lvs服务端，可选范围"master" "backup" "no"，默认"no"
lvs-vip-with-perfix	如果指定，会帮助将lvs配置中的vip由192.168.56.203/24替换为该值，默认不修改
lvs-port	如果指定，会帮助将lvs配置中的监听端口由3306替换为该值，默认不修改，端口需要和HotDB集群的数据服务端口相同
lvs-virtual-router-id	如果指定，会帮助将lvs配置中的virtual-router-id由51替换为该值，默认不修改
lvs-net-interface-name	如果指定，会帮助将lvs配置中的vip设备名称由eth1:2替换为该值，默认不修改
lvs-real-server-list	lvs后端HotDB服务器IP:数据服务端口:管理端口列表，逗号分隔，例如"192.168.0.1:3323:3325,192.168.0.2:4323:4325"，默认为空
lvs-real-server-user	lvs健康检查脚本连接后端HotDB服务器管理端口使用的用户名，默认"root"
lvs-real-server-password	lvs健康检查脚本连接后端HotDB服务器管理端口使用的用密码，默认"root"
lvs-real-server-startup-type	作为lvs的realserver时，服务器相关调整的配置方式，可选范围"no" "config" "service" 默认"no"
install-ntpd	是否安装ntpd，可选范围"yes" "no"，如果安装HotDB，则默认安装ntpd，否则默认不安装。注意，一个HotDB集群里面，应当只有一个ntpd；HotDB备机应当向HotDB主机同步时间。如果内网有ntp源，则不必安装ntpd
ntpdate-server-ip	配置时间同步的ip地址，该参数与ntpdate-server-host必须指定其中一个且只能指定其中一个。如果本机安装ntpd，则应当指定为HotDB集群外的时间源；如果本机不安装ntpd，则应当指定为HotDB集群内部的ntpd服务所在的服务器地址（如果主HotDB安装了ntpd服务的话），或内网中的ntpd服务器地址，不应该选择外网地址
ntpdate-server-host	配置时间同步的主机地址，允许为域名或ip，脚本不会对该参数做任何处理与检查，需要依赖调用者保证正确性，该参数与ntpdate-server-ip必须指定其中一个且只能指定其中一个。如果本机安装ntpd，则应当指定为HotDB集群外的时间源；如果本机不安装ntpd，则应当指定为HotDB集群内部的ntpd服务所在的服务器地址（如果主HotDB安装了ntpd服务的话），或内网中的ntpd服务器地址，不应该选择外网地址

 

2. 参数使用说明

·     参数的组合使用：参数名=值+空格+参数名=值，例如：

--hotdb-heap-mem-size-gb=1 --hotdb-max-direct-mem-size-gb=1 --ntpdate-server-ip=192

.168.200.140 --rpl-semi-sync-enabled=on --mysql-version=5.7 --hotdb-config-port=3316 --install-ntpd=yes --install-hotdb-server=yes --hotdb-version=2.5 --install-hotdb-backup=yes --mysql-port-list=3307,3308 --install-hotdb-server-management=yes

·     脚本安装存储节点监听程序：

--hotdb-heap-mem-size-gb=1 --hotdb-max-direct-mem-size-gb=1 --ntpdate-server-ip=192

.168.200.140 --rpl-semi-sync-enabled=on --mysql-version=5.7 --hotdb-config-port=3316 --install-ntpd=yes --install-hotdb-server=yes  --install-hotdb-listener=yes --hotdb-version=2.5 --install-hotdb-backup=yes --mysql-port-list=3307,3308 --install-hotdb-server-management=yes

·     运行脚本使用方法：sh -x 脚本名称.sh+空格+参数串

sh -x hotdbinstall_v*.sh --hotdb-heap-mem-size-gb=1 --hotdb-max-direct-mem-size-gb=1

 --ntpdate-server-ip=192.168.200.140 --rpl-semi-sync-enabled=on --mysql-version=5.6 --hotdb-config-port=3316 --install-ntpd=yes --install-hotdb-server=yes --hotdb-version=2.4 --install-hotdb-backup=yes --mysql-port-list=3307,3308 --install-hotdb-server-management=yes

3. 脚本其他说明

·     因当前一键部署安装脚本需要执行tune脚本，tune脚本中会修改网卡相关硬件参数，可能导致网卡短暂失去响应或网卡内部重启。已知在配置了Bond的环境下，可能因为操作系统响应不够快或交换机响应不够快，导致短时间内的网络连接中断，进而导致SSH终端断连或HotDB连接中断，部分情况可通过缩短Bond 配置参数miimon=100缓解。

·     安装前建议关闭服务器自带的防火墙与selinux功能（selinux重启生效）。

4 手动部署

以下将分别介绍单计算节点、HA（主备）模式的计算节点集群手动部署方法，负载均衡模式的多计算节点集群推荐使用“集群部署”功能自动部署。

4.1  计算节点服务器开启大页内存

(1)     分配大页内存：

echo 9216> /sys/kernel/mm/hugepages/hugepages-2048kB/nr_hugepages

大页内存个数由分配给计算节点的堆内存计算得来，计算公式为：堆内存(单位k)/2048k+1024。例如堆内存为16G，则大页个数为(16*1024*1024/2048+1024=9216)

(2)     创建大页内存挂载点并赋权：

mkdir /hugepages

mount -t hugetlbfs hugetlbfs -o  nodev /hugepages

vi /etc/fstab

添加一行    nodev /hugepages hugetlbfs defaults 0 0

chmod 777 /hugepages

(3)     修改系统参数：

echo 'vm.nr_hugepages = 9216'>>/etc/sysctl.conf

(4)     刷新参数：

sysctl -p

4.2  单节点模式集群部署

单节点部署教程所用环境以及部署组件说明如下所示。

表4-1 部署环境

项目	名称
服务器属性	虚拟机
操作系统	x86架构cpu服务器推荐使用64 位的H3Linux K310 V113-x86_64(64bit)
MySQL版本	MySQL 5.7.25
JDK	JDK1.8

 

表4-2 部署组件

组件名称	安装数量
计算节点	1
管理平台	1
配置库	1
存储节点	4

 

 

4.2.1  计算节点

 

·     JDK1.7的安装，推荐使用64位的JDK1.7_80。从JAVA官方网站获取JDK的RPM安装包，并上传至服务器也可联系供应商获取。

a.     执行下列命令，将JDK 安装到/usr/local/目录下：

# rpm -ivh jdk-7u80-linux-x64.rpm --prefix=/usr/java/

b.     配置JDK环境变量

打开并编辑/etc/profile文件：

#vi /etc/profile

在文件末尾加入下列信息：

export JAVA_HOME=/usr/java/jdk1.7.0_80

export PATH=$JAVA_HOME/bin:$PATH

执行source命令，使新增的环境变量生效：

#source /etc/profile

·     JDK1.8的安装，推荐使用OpenJDK8安装包，其操作步骤推荐如下：

a.     上传OpenJDK8安装包

可使用rz命令或ftp文件传输工具上传OpenJDK8U-jdk_x64_linux_hotspot_8u252b09.tar.gz安装包，该安装包可联系新华三索要

b.     解压安装包即可

#mkdir -p /usr/local/jdk8

#tar -xvf OpenJDK8U-jdk_x64_linux_hotspot_8u252b09.tar.gz -C /usr/local/jdk8

·     JDK11的安装，推荐使用OpenJDK11安装包，其操作步骤推荐如下：

a.     上传OpenJDK11安装包

可使用rz命令或ftp文件传输工具上传OpenJDK11U-jdk_x64_linux_hotspot_11.0.11_9.tar.gz安装包，该安装包可联系新华三索要

b.     解压安装包即可

#mkdir -p /usr/local/jdk11

#tar -xvf OpenJDK11U-jdk_x64_linux_hotspot_11.0.11_9.tar.gz -C /usr/local/jdk11

1. 检测glibc

计算节点的服务授权需要安装加密锁的驱动包，该驱动包依赖于32位的glibc。所以在安装计算节点之前必须检测服务器中是否包含32位的glibc。检测出未安装时需要手动安装完成后再往下操作。若计算节点版本高于（包含）2.5.6，则可以无需部署该组件，使用内部自研的加密授权工具即可。

(1)     查看服务器glibc安装情况：（有输出glibc版本信息为正常）

# rpm -q glibc |egrep 'glibc.*i.86.*'

2. 安装配置库

配置库可与计算节点安装在同一台服务器上，也可以分开单独安装。具体步骤参照“配置库安装说明”。

3. 服务授权

SeaSQL DRDS能正常启动并提供服务需要通过新华三正规的授权许可，可理解为需要license。

4. 安装计算节点

安装计算节点，需要解压计算节点安装包，修改计算节点配置文件server.xml，再导入配置库表结构到安装好的MySQL配置库实例中。

(1)     将hotdb-server-2.5.0-xxx.tar.gz二进制包上传至服务器，创建SeaSQL DRDS的安装目录，并将SeaSQL DRDS解压到安装目录。

#mkdir /usr/local/hotdb

#tar -zxvf hotdb-server-2.5.0-xxx.tar.gz -C /usr/local/hotdb/

(2)     配置库表结构在计算节点的安装目录conf下，使用下列命令可导入表结构到配置库中。（导入表结构，会创建配置库hotdb_config）

#mysql -uroot --socket=/data/mysqldata3306/sock/mysql.sock < /usr/local/hotdb/hotdb-server/conf/hotdb_config.sql

5. 添加配置库账户

计算节点访问配置库，需要在配置库MySQL实例中添加访问账号。登录配置库执行下列MySQL语句，创建配置库账户“hotdb_config”。

(1)     创建hotdb_config账户

create user 'hotdb_config'@'%' identified by 'hotdb_config';

(2)     赋予权限

GRANT select,insert,update,delete,create,drop,index,alter,reload,references,create temporary tables,super,lock tables,replication slave,replication client ON *.* TO 'hotdb_config'@'%';

6. 修改计算节点配置文件

需要修改的配置文件server.xml在计算节点的安装目录conf下。需要设置计算节点连接配置库与端口号（若无特殊要求可直接用默认端口号）等参数。

#vi /usr/local/hotdb/hotdb-server/conf/server.xml

<property name="url">jdbc:mysql://192.168.200.1:3306/hotdb_config</property><!-- 配置库地址 -->

<property name="username">hotdb_config</property><!-- 配置库用户名 -->

<property name="password">hotdb_config</property><!-- 配置库密码 -->

<property name="serverPort">3323</property><!-- 服务端口 -->

<property name="managerPort">3325</property><!-- 管理端口 -->

 

7. 启动与停止计算节点

计算节点的启动脚本“hotdb_server”在计算节点的安装目录bin下。执行下列命令即可启动或关闭

(1)     启动计算节点服务

#cd /usr/local/hotdb/hotdb-server/bin

#sh hotdb_server start

(2)     查看计算节点是否启动成功

#jps | grep -i HotdbStartup   

19833 HotdbStartup

(3)     停止计算节点服务

#kill -9 19833 或 sh hotdb_server stop

 

4.2.2  管理平台

管理平台在部署之前，也需要同步安装JDK，同计算节点一样，若版本为V2.5.6（不包含）版本以下，则需要安装JDK版本为1.7；若版本为V2.5.6（包含）版本以上，则需要安装JDK版本为1.8。安装步骤同4.2.1  计算节点章节描述一致。

 

1. 解压管理平台安装包

将hotdb-management-2.x.x-xxx.tar.gz二进制包上传至服务器安装目录，并执行以下命令。

#cd /usr/local/hotdb

#tar -zxvf hotdb-management-2.x.x-xxx.tar.gz

2. 导入管理平台配置库表结构

管理平台配置库可与计算节点配置库共用一个MySQL实例，但生产环境中不建议共用。管理平台配置库表结构在其安装目录doc下，使用导入配置命令前需要先在配置库中创建管理平台连接配置库的账户“hotdb_cloud”。

(1)     创建hotdb_cloud账户

create user 'hotdb_cloud'@'%' identified by 'hotdb_cloud';

(2)     赋予权限

 GRANT select,insert,update,delete,create,drop,index,alter,references ON *.* TO 'hotdb_cloud'@'%';

(3)     导入管理平台配置到配置库中

#mysql -uroot --socket=/data/mysqldata3306/sock/mysql.sock < /usr/local/hotdb/hotdb-management/doc/hotdb_cloud_config.sql

3. 修改管理平台配置文件

修改的配置文件在管理平台安装目录conf下为“application.properties”，主要修改管理平台对配置库的连接信息,使用端口以及管理平台的语言设置（若无特殊要求可直接用默认端口号和默认语言）。

(1)     编辑配置文件

#vi /usr/local/hotdb/hotdb-management/conf/application.properties

(2)     修改参数信息

#管理平台监听端口

server.port=3324

#Hotdb Backup备份程序监听端口

server.backup.port=3322

#SeaSQL Management配置库地址

spring.datasource.url=jdbc:mysql://192.168.200.1:3306/hotdb_cloud_config?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&connectTimeout=3000

#SeaSQL Management配置库用户名

spring.datasource.username=hotdb_cloud

#SeaSQL Management配置库密码

spring.datasource.password=hotdb_cloud

#SeaSQL Management语言设置，默认为英语，若需要使用中文，则将其设置为Chinese

language=English/Chinese

4. 启动与停止管理平台

管理平台的启动脚本“hotdb_management”其安装目录bin下。执行下列命令即可启动或停止管理平台服务。

(1)     进入启动脚本目录

#cd /usr/local/hotdb/hotdb-management/bin

(2)     启动管理平台服务

#sh hotdb_management start

(3)     查看服务是否启动成功（启动成功后可在浏览器中打开并登陆管理平台）

#jps | grep -i hotdb-management

6595 hotdb-management-xxx.jar

(4)     关闭管理平台服务

#kill 6595 或 sh hotdb_management stop

4.2.3  配置库

配置库实质上是一个标准的MySQL实例，用途主要为计算节点或管理平台存储相关配置信息。目前配置库支持以单库、双主、MGR三种形式运行。

 

1. 下载MySQL rpm包

从MySQL的官网下载MySQL5.6.32的版本到服务器，以下版本针对 H3Linux K310 V113-x86_64(64bit)系统推荐，仅做参考，其他系统可参考官方说明下载相应版本

http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-shared-compat-5.6.32-1.el6.x86_64.rpm

http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-devel-5.6.32-1.el6.x86_64.rpm

http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-client-5.6.32-1.el6.x86_64.rpm

http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-server-5.6.32-1.el6.x86_64.rpm

http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-shared-5.6.32-1.el6.x86_64.rpm

2. 卸载MariaDB

若操作系统中已安装有MariaDB则需要卸载后才能安装MySQL。查询MariaDB安装情况与卸载参照如下：

·     查看是否安装命令：

# rpm -qa|grep mariadb

mariadb-libs-5.5.44-2.el7.centos.x86_64

·     卸载MariaDB命令：

# yum remove mariadb-libs-5.5.44-2.el7.centos.x86_64

3. 安装MySQL rpm包

·     上传MySQL rpm包到服务器并执行rpm命令安装MySQL。

#yum -y localinstall -nogpgcheck MySQL-server-5.6.32-1.el6.x86_64.rpm         MySQL-shared-compat-5.6.32-1.el6.x86_64.rpm MySQL-devel-5.6.32-1.el6.x86_64.rpm            MySQL-client-5.6.32-1.el6.x86_64.rpm MySQL-shared-5.6.32-1.el6.x86_64.rpm

·     或者可以执行以下命令：

#yum -y localinstall MySQL-*.rpm

4. MySQL配置文件

将下列内容复制并替换服务器的/etc/my.cnf文件中的原有内容

[client]

default-character-set=utf8

[mysqld_safe]

ledir=/usr/sbin

user=mysql

open-files-limit=8192

[mysqld_multi]

mysqld  = /usr/bin/mysqld_safe

user = root

log = /data/multi.log

[mysqld]

#***********************************common parameters******************************

basedir=/usr

skip-federated

skip-blackhole

skip-name-resolve

skip_external_locking

flush=OFF

performance_schema=0

event-scheduler=ON

default-storage-engine=InnoDB

character_set_server=utf8

collation_server=utf8_general_ci

lower_case_table_names=1

explicit_defaults_for_timestamp

sql_mode='STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION'

user=mysql

port=3306

pid-file=/data/mysqldata3306/sock/mysql.pid

socket=/data/mysqldata3306/sock/mysql.sock

datadir=/data/mysqldata3306/mydata

tmpdir=/data/mysqldata3306/tmpdir

group_concat_max_len=1048576

back_log=1000

max_connections=8000

max_user_connections=7900

thread_cache_size=128

max_connect_errors=99999

wait_timeout=172800

interactive_timeout=172800

net_buffer_length=8K

max_allowed_packet=64M

max_heap_table_size=1G

tmp_table_size=2M

sort_buffer_size=8M

max_length_for_sort_data=16k

join_buffer_size=4M   #bka

read_rnd_buffer_size=8M  #mrr

table_open_cache=1024

table_open_cache_instances=16

query_cache_type=0

query_cache_size=0

#query_cache_limit=1M

#*******************************  Logs related settings ***************************

#general_log

general_log_file=/data/mysqldata3306/log/general.log

log-error=/data/mysqldata3306/log/error.log

long_query_time=1

slow_query_log

slow_query_log_file=/data/mysqldata3306/log/slow-query.log

#log_queries_not_using_indexes

log_warnings = 2

log-bin-index=/data/mysqldata3306/binlog/mysql-bin.index

log-bin=/data/mysqldata3306/binlog/mysql-bin

relay-log-index=/data/mysqldata3306/relaylog/mysql-relay-bin.index

relay-log=/data/mysqldata3306/relaylog/mysql-relay-bin

binlog_cache_size=256K

max_binlog_size=512M

binlog-format=MIXED

binlog-checksum=CRC32

sync_binlog=0

expire_logs_days=10

#*******************************  Replication related settings *********************

server-id= 3306

#skip-slave-start

log_slave_updates=1

log_bin_trust_function_creators=1

auto_increment_increment=1

auto_increment_offset=1

allow-suspicious-udfs

innodb_support_xa=1

sysdate-is-now

#******************************* MyISAM Specific options ***************************

key_buffer_size=8M

bulk_insert_buffer_size=16M

myisam_sort_buffer_size=64M

myisam_max_sort_file_size=10G

myisam_repair_threads=1

myisam-recover-options=default

read_buffer_size=1M

#***************************** INNODB Specific options ****************************

innodb_use_sys_malloc=1

#innodb_additional_mem_pool_size=32M

innodb_buffer_pool_size=4G

innodb_buffer_pool_instances=2

innodb_max_dirty_pages_pct=40

innodb_sort_buffer_size=16M

innodb_data_home_dir=/data/mysqldata3306/innodb_ts

innodb_data_file_path=ibdata1:1024M:autoextend

innodb_autoextend_increment=128

innodb_file_per_table

innodb_open_files=7168

innodb_file_format=Barracuda

innodb_file_format_check=1

innodb_fast_shutdown=1

innodb_force_recovery=0

innodb_flush_log_at_trx_commit=2

innodb_log_buffer_size=64M

innodb_log_file_size=1G

innodb_log_files_in_group=2

innodb_log_group_home_dir=/data/mysqldata3306/innodb_log

innodb_adaptive_flushing_lwm=30

innodb_read_io_threads=8

innodb_write_io_threads=8

innodb_io_capacity=200

innodb_flush_method=O_DIRECT

innodb_flush_neighbors=0

innodb_lru_scan_depth=1024

innodb_change_buffering=all

innodb_purge_threads

innodb_commit_concurrency=0

innodb_thread_concurrency=0

innodb_concurrency_tickets=1024

innodb_autoinc_lock_mode=1

innodb_stats_on_metadata=0

innodb_lock_wait_timeout=120

innodb_rollback_on_timeout=1

[mysqldump]

quick

max_allowed_packet=2G

default-character-set=utf8

[mysql]

no-auto-rehash

prompt="\\u@\\h : \\d \\r:\\m:\\s> "

default-character-set=utf8

show-warnings

[myisamchk]

key_buffer=512M

sort_buffer_size=512M

read_buffer=8M

write_buffer=8M

[mysqlhotcopy]

interactive-timeout

5. 创建MySQL目录

根据my.cnf配置文件的目录参数，创建MySQL数据目录，并设置数据目录的所有者用户。

#mkdir -p /data/mysqldata3306

#mkdir -p /data/mysqldata3306/mydata

#mkdir -p /data/mysqldata3306/binlog

#mkdir -p /data/mysqldata3306/innodb_ts

#mkdir -p /data/mysqldata3306/innodb_log

#mkdir -p /data/mysqldata3306/relaylog

#mkdir -p /data/mysqldata3306/tmpdir

#mkdir -p /data/mysqldata3306/log

#mkdir -p /data/mysqldata3306/sock

#chown -R mysql:mysql /data/mysqldata3306

6. 初始化数据库

执行mysql_install_db初始系统数据库到指定目录。

#mysql_install_db --defaults-file=/etc/my.cnf --user=mysql

--datadir=/data/mysqldata3306/mydata

7. 启动配置库MySQL实例

使用mysql的启动脚本启动数据库。

(1)     启动MySQL服务

#/etc/rc.d/init.d/mysql start

(2)     使用netsat命令检测MySQL是否启动成功

#netstat -npl |grep mysql

(3)     命令有输出即代表启动成功

【注意】：安装完成后请及时修改root用户密码。

4.2.4  存储节点

 

存储节点实质上是一个标准的MySQL实例，用途为整套集群提供底层业务数据的存储。安装数量与搭建复制关系根据实际业务场景而定。

1. 物理库

存储节点是由IP+实例端口+物理库确定的。所以在管理平台上配置的存储节点需要填写物理库名称。一般手动安装的存储节点实例需要手动创建物理库，方便后期添加到管理平台中供集群使用。

在存储节点实例中创建物理库：

#create database db01;

2. 连接用户

通过手动安装部署的存储节点，还需创建用于计算节点连接存储节点实例的数据库用户。

(1)     创建数据库用户

#create user 'hotdb_datasource'@'%' identified by 'hotdb_datasource';

(2)     用户赋权

#GRANT select,insert,update,delete,create,drop,index,alter,process,references,super,reload,lock tables,replication slave,replication client,trigger,show view,create view,create routine,create temporary tables,alter routine,execute,event ON *.* TO 'hotdb_datasource'@'%';

【注意】当存储节点的MySQL版本大于等于8.0时，需多加一个权限“xa_recover_admin”。

3. 备份用户：

通过手动安装部署的存储节点，若需要使用数据备份功能，还需要创建用于数据备份的数据库用户。

(1)     创建数据库用户

#create user 'dbbackup'@'127.0.0.1' identified by ' dbbackup';

(2)     用户赋权

# GRANT select,insert,update,delete,create,drop,index,alter,reload,process,references,super,lock tables,replication slave,replication client,trigger,show view,create view,create routine,alter routine,event ON *.* TO 'dbbackup'@'127.0.0.1';

4.2.5  备份程序

备份程序（HotDB Backup）为自主研发的分布式数据库备份工具。通常部署在集群的存储节点服务器上，监听来自管理平台的数据备份请求。一台存储节点服务器只需部署一个备份程序即可。

1. 使用须知

·     仅支持备份MySQL 5.6及以上版本的数据。

·     被备份的存储节点实例必须开启binlog。

·     SeaSQL Management所在的服务器，必须安装MySQL Client,否则会影响备份。

2. 解压备份程序安装包

将“hotdb_backup-2.0-xxxxxxxx.tar.gz”二进制包上传至服务器。创建备份程序的安装目录，并将备份程序解压到安装目录。

#mkdir /usr/local/hotdb/

#tar -zxvf hotdb_backup-2.0-20190109.tar.gz -C /usr/local/hotdb/

3. 启动与停止备份程序

·     启动备份服务程序

#cd /usr/local/hotdb/hotdb_backup

#sh bin/hotdb_backup start -h 192.168.220.104 -p 3322

-h后面加管理平台服务器的ip，-p后面加管理平台监听备份程序端口（一般为3322,具体可在管理平台配置文件application.properties中查看参数server.backup.port）。

启动成功后会打印以下日志：

INFO: Start HotDB-backup ...

INFO: HotDB-backup start successed.

·     停止备份服务程序

#sh bin/hotdb_backup stop

关闭成功后会打印以下日志

INFO: Stopping HotDB-backup ...

INFO: HotDB-backup stopped success.

·     查看HotDB-Backup运行状态

#sh bin/hotdb_backup status

¡     已运行提示：INFO: HotDB-backup service already running (PID: 11709).

¡     未运行提示：INFO: HotDB-backup service not running.

·     查看HotDB-Backup日志

#cat logs/hotdb_backup.log

·     HotDB Backup常见日志

¡     Start backup #备份任务发起

¡     Backup is stopped #备份任务结束

¡     Connected to server successfully! #备份程序与SeaSQL Management正常建立连接

¡     Got a quit signal from user, will quit after backup is finished #备份程序正常退出

4.3  HA（主备）模式集群部署

主备节点模式集群部署教程所用环境以及部署组件说明如下所示：

表4-3 部署环境

项目	名称
服务器属性	物理机
操作系统	H3Linux K310 V113-x86_64(64bit)
MySQL版本	MySQL 5.7.25
JDK	JDK1.7_80

 

表4-4 部署组件

组件名称	安装数量
计算节点	2
Keepalived	2
管理平台	1
配置库	1
存储节点	4

 

注：各组件名称说明可参考《H3C SeaSQL DRDS 管理平台 名词解释手册》文档。

4.3.1  特殊说明

本章主要介绍在HA集群模式下的计算节点server.xml配置、Keepalived安装与配置、启动说明、高可用切换等。计算节点、管理平台、配置库、存储节点的安装步骤本章不再赘述，具体请参见“4.2  单节点模式集群部署”。

表4-5 部署规划

实例	IP	服务端口	管理端口	HA角色
主计算节点	192.168.200.190	3323	3325	Master
备计算节点	192.168.200.191	3323	3325	Slave

 

图4-1 HA计算节点部署示意图

 

 

4.3.2  计算节点

(1)     安装主备计算节点

分别在192.168.220.190、192.168.200.191安装计算节点服务，安装过程参照上一章节“4.2.1  4. 安装计算节点”说明。

(2)     修改主备计算节点配置文件

部署好的主备计算节点需要修改对应的配置文件server.xml，具体修改如下所示：

¡     主计算节点192.168.200.190上server.xml配置修改

<property name="haState">master</property>< HA 角色，主节点：master，备节点：backup>

<property name="haNodeHost"></property><HA 角色，其他节点 IP:PORT>

<property name="VIP">192.168.200.140</property><虚拟IP地址>

¡     备计算节点192.168.200.191上server.xml配置修改

<property name="haState">backup</property>< HA 角色，主节点：master，备节点：backup>

<property name="haNodeHost">192.168.200.190:3325</property><HA 角色，其他节点 IP:PORT>

<property name="VIP">192.168.200.140</property><虚拟IP地址>

 

4.3.3  Keepalived

1. 安装keepalived

可用yum方式安装keepalived，也可在keepalived官网https://www.keepalived.org/download.html下载安装tar包。

(1)     yum方式安装keepalived（主备计算节点所在服务器上执行keepalived安装命令）

#yum -y install keepalived

(2)     启动或关闭keepalived

#service keepalived start / service keepalived stop

(3)     查看keepalived运行状态

#service keepalived status

2. 修改keepalived配置文件

Keepalived配置文件默认存放在/etc目录下为“keepalived.conf”，将下列实例内容复制替换到对应的keepalived配置文件中，并按照加粗斜体位置进行实际修改（标准的SeaSQL DRDS 安装包中对应的conf目录下也有keepalived主备模式的配置文件，也可将其直接复制到/etc目录下，进行自定义修改）。

·     主计算节点：192.168.200.190的keepalived配置信息：

! Configuration File for keepalived

global_defs {

router_id SeaSQL DRDS-ha

}

vrrp_script check_SeaSQL DRDS_process {

script "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_p

rocess.sh process"

interval 5

fall 2

rise 1

weight -10

}

vrrp_script check_SeaSQL DRDS_connect_state {

state

code

script "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_p

rocess.sh connect_master"

interval 5

fall 3

rise 1

timeout 5

weight -10

}

vrrp_instance VI_1 {

state BACKUP

interface eth1

virtual_router_id 89

nopreempt

priority 100

advert_int 1

authentication {

auth_type PASS

auth_pass 1111

}

track_script {

check_SeaSQL DRDS_process

check_SeaSQL DRDS_connect_state

}

#be careful in red hat

track_interface {

eth1

}

virtual_ipaddress {

192.168.200.140/24 dev eth1 label eth1:1

}

notify_master "/bin/bash /usr/local/hotdb/hotdb-server/bin/chec

k_hotdb_process.sh master_notify_master"

notify_backup "/bin/bash /usr/local/hotdb/hotdb-server/bin/chec

k_hotdb_process.sh master_notify_backup"

notify_fault "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_process.sh master_notify_backup"

}

·     备计算节点：192.168.200.191的keepalived配置信息：

! Configuration File for keepalived

global_defs {

router_id SeaSQL DRDS-ha

}

vrrp_script check_SeaSQL DRDS_process {

script "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_p

rocess.sh process"

interval 5

fall 2

rise 1

weight -10

}

vrrp_script check_SeaSQL DRDS_connect_state {

state

code

script "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_p

rocess.sh connect_backup"

interval 5

fall 3

rise 1

timeout 5

weight -10

}

vrrp_instance VI_1 {

state BACKUP

interface eth0

virtual_router_id 89

priority 95

advert_int 1

authentication {

auth_type PASS

auth_pass 1111

}

track_script {

check_SeaSQL DRDS_process

check_SeaSQL DRDS_connect_state

}

#be careful in red hat

track_interface {

eth0

}

virtual_ipaddress {

192.168.200.140/24 dev eth0 label eth0:1

}

notify_master "/bin/bash /usr/local/hotdb/hotdb-server/bin/chec

k_hotdb_process.sh backup_notify_master"

notify_backup "/bin/bash /usr/local/hotdb/hotdb-server/bin/chec

k_hotdb_process.sh backup_notify_backup"

notify_fault "/bin/bash /usr/local/hotdb/hotdb-server/bin/check_hotdb_process.sh backup_notify_backup"

}

 

3. 关于自定义修改内容说明：

·     script脚本路径为计算节点实际安装路径，调用的master/backup 脚本根据实际的主备角色进行配置。

·     interface：绑定的网卡。

·     nopreempt：设置是否开启抢占模式。添加此参数，将不开启抢占模式；否则开启抢占模式。例如主的参数值是priority 100，备的参数值是priority 95，该参数只需要在主keepalived配置脚本设置。

·     priority：优先级，优先级高的为master。

·     virtual_ipaddress：instance绑定的vip（vip需与计算节点所在的ip同网段）。

·     Label：给本地网卡起一个虚拟名称，用于绑定虚拟网卡IP，例如把虚拟网卡eth0:1绑定到本地网卡eth0上。

·     Script：判断服务是否正常的脚本路径，通常存放在 SeaSQL DRDS 的 bin目录下，例如：/usr/local/hotdb/hotdb-server/bin/check_hotdb_process.sh，该脚本可检查 HotDB Serve 主备服务的进程是否存在，主备HotDB Serve的3323端口和3325端口的状态是否正常。

4. 启动说明

由于两台机器上的SeaSQL DRDS互为主备关系，在服务启动的时，需要注意启动的顺序问题，如下为标准启动顺序：

(1)     先启动主（192.168.200.190）的keepalived，待ping通vip后再启动主计算节点服务。

a.     启动主keepalived服务

#service keepalived start

b.     ping通vip后再启动主计算节点服务

#sh /usr/local/hotdb/hotdb-server/bin/hotdb_server start

(2)     ip a可查看当前主的keepalived VIP是已绑定成功。

 

(3)     主计算节点服务启动完等待20秒后再启动备（192.168.200.191）的keepalived，keepalived启动完成后等待10秒再启动备计算节点服务。

a.     启动备keepalived服务

#service keepalived start

b.     启动备计算节点服务

#sh /usr/local/hotdb/hotdb-server/bin/hotdb_server start

4.3.4  高可用切换说明

当主机192.168.200.190服务上的计算节点服务故障时，检测脚本(vrrp_scripts)检测到计算节点主服务端口不可访问或hacheck连续失败超过3次时，主keepalived优先级会进行自动调整，变成 90(weight -10)，备机192.168.200.191服务上的keepalived收到比自己优先级低的vrrp包(192.168.200.191上优先级为95)后，将切换到master状态，抢占vip(192.168.200.140)，同时在进入master状态后，执行notify_master脚本，访问备服务3325端口执行online命令启动并初始化备计算节点服务端口，若192.168.200.191的计算节点启动成功，则主备切换成功后继续提供服务。如下图：

 

Keepalived VIP此时已在192.168.200.191服务器上。

 

1. 高可用重建说明

具体可参考《H3C SeaSQL DRDS 管理平台 用户手册》中的“高可用重建”章节，通过该功能可实现：当192.168.200.190服务器上计算节点发生故障切换后，手动触发计算节点高可用重建功能，即可修复 192.168.200.190 服务器上计算节点服务及主备关系，当192.168.200.191服务器上计算节点再发生故障时，可自动进行回切到192.168.200.190上。

4.4  NDB SQL服务

NDB SQL服务可用于在分布式环境下帮助计算节点完成相对复杂的SQL查询语句计算。关于NDB SQL服务详细介绍可参考《H3C SeaSQL DRDS 计算节点 用户手册》中说明。目前NDB SQL服务支持使用一键部署安装脚本方式与管理平台“集群部署”、“单机部署”功能自动部署方式进行安装。以下将介绍通过脚本方式对NDB SQL服务的安装部署。

1. 手动安装前须知

·     NDB SQL服务与计算节点服务是一一对应的，即每台计算节点所在服务器如果需要使用NDB SQL服务支持都需部署该服务程序。

·     与NDB SQL服务对应的计算节点版本必须是V2.5.2及以上版本，否则不支持NDB SQL服务。

·     推荐NDB SQL服务与计算节点一次性跟随部署，若目前已有计算节点需要追加NDB SQL服务则需要严格注意：--install-ntpd、--ntpdate-server-ip、--ntpdate-server-host传参问题，需要同当前部署的集群同步时间配置一致。

2. 计算节点与NDB SQL一同部署过程说明

当前以主备模式集群为例演示使用脚本安装计算节点与NDB SQL服务，具体步骤说明如下：

(1)     登录每台计算节点服务器，进入一键部署资源包目录Install_Package下执行安装命令。

a.     登录主计算节点服务器，进入一键部署默认安装目录执行：

sh hotdbinstall_v2.42.sh --install-hotdb-server=yes --hotdb-version=2.5 --install-ndbsql=yes --install-ntpd=yes --ntpdate-server-host=182.92.12.11

b.     登录备计算节点服务器，进入一键部署默认安装目录执行：

sh hotdbinstall_v2.42.sh --install-hotdb-server=yes --hotdb-version=2.5 --install-ndbsql=yes --ntpdate-server-host=主计算节点服务器IP地址

3. 单独部署NDB SQL过程说明

若已安装好计算节点，但后期需要追加安装NDB SQL服务则可通过脚本单独部署NDB SQL方式进行操作，或通过管理平台“单机部署”功能实现。本示例以单节点集群为例说明后期追加部署NDB SQL服务的操作。

(1)     登录计算节点服务器，进入一键部署资源包目录Install_Package下执行安装命令。

示例：

sh hotdbinstall_v2.xx.sh --install-ndbsql=yes --ntpdate-server-host=182.92.12.11

注意：

¡     安装NDB SQL指定服务器时间同步地址时使用的时间同步参数需要与上一次安装计算节点时保持一致。即当时使用的是ntpdate-server-ip还是ntpdate-server-host参数，两次必须一致

¡     时间同步地址参数值需与上一次安装计算节点时使用的时间同步地址一致，如果集群内已有NTP服务则参数值应该是NTP服务所在服务器的IP地址。

4. NDB SQL配置说明

NDB SQL服务安装完成后需要在对应的计算节点安装conf目录下修改server.xml文件配置。需将配置文件中的ndbSqlMode修改为local。具体如下所示：

 

5. NDB SQL启动关闭说明

NDB SQL服务不需要单独启动关闭，启动计算节点时会同时启动NDB SQL服务，关闭计算节点时也会同步关闭NDB SQL服务。

4.5  SeaSQL DRDS Listener组件

SeaSQL DRDS Listener是计算节点一个可拔插组件，开启后可解决集群强一致模式下的性能线性扩展问题。要使用Listener需满足：计算节点是多节点集群模式并开启XA、在存储节点服务器上成功部署Listener并启用enableListener参数。此处仅说明手动单独部署Listener的操作方法，一键部署方式可参考自动部署对应章节进行统一安装。

 

1. 解压一键部署安装包

将一键部署安装包auto_hotdbinstall_HotDB2.5.5_v1.0_20200422.tar.gz（2.5.5为版本号，不同版本其编号不同，注意同步替换）上传至存储节点服务器/usr/local/hotdb目录下，执行下列命令解压：

#cd /usr/local/hotdb

#tar -zxvf auto_hotdbinstall_HotDB2.5.5_v1.0_20200422.tar.gz

2. 安装Listener

一键部署安装包内置Listener安装包。执行下列命令，将Listener安装在/usr/local/hotdb目录下：

#cd /usr/local/hotdb/Install_Package

#tar -zxvf hotdb-listener-0.0.1-alpha-20200420-linux.tar.gz -C /usr/local/hotdb/

3. 配置Listener

(1)     在启动之前，先根据服务器可用内存空间，调整Listener的堆内存大小。

#cd /usr/local/hotdb/hotdb-listener/bin

#vi hotdb_listener

(2)     将第24行堆内存大小设置为合理范围。

(3)     若服务器内存较大，可根据需求使用G1算法及相应配置。

(4)     接着配置Listener启动端口（若无特殊需求配置，此步可省略）

#cd /usr/local/hotdb/hotdb-listener/conf

#vi config.properties

(5)     host默认0.0.0.0，无需修改；port默认3330，不建议修改，除非被占用。

4. 启动Listener

(1)     执行下列命令即可启动Listener：

#cd /usr/local/hotdb/hotdb-listener/bin

#sh hotdb_listener start

(2)     启动成功窗口会提示“HotDB-Listener start successed.”

除了start外，还有其他参数可以使用，使用方法如下：

#sh hotdb_listener

Usage: sh hotdb_listener [start|stop|restart]

example:

HotDB-Listener start     :    sh hotdb_listener start

HotDB-Listener stop      :    sh hotdb_listener stop

HotDB-Listener restart   :    sh hotdb_listener restart

(3)     启动完毕，可切换到logs目录查看日志输出，可查看到Listener的相关信息。

#tailf listener.log

2020-05-25 12:09:54.089 [INFO] [INIT] [main] cn.hotpu.hotdb.ListenerServer(158) - Listener-Manager start listening on host 0.0.0.0 port 3330