[计算机软件及应用]Lifekeeper for Linux 安装.doc

 Lifekeeper for Linux 安装1.1 概述环境规划与设置主要包括以下几部分  操作系统安装与设置  网络规划与设置 1.2 操作系统安装与设置首先安装 Linux , 在安装过程中注意：  给每块网卡赋予一个静态 IP 地址 / 子网掩码，用作心跳的网卡与连接公网的网卡使用不同的 IP 子网  对于连接公网的网卡，设置好网关以及 DNS 服务器（如果有的话）给服务器设置一个便于记忆的主机名，如主机设为 server1, 备机设为 server2 1.3 网络规划与设置 1.3.1 网络规划1 . 必须保证每个网卡有一个永久的 IP 地址用于以后在 LifeKeeper 中创建通信路径（俗称心跳）2 . 除了连接公网的网卡之外，至少另外配置一对网卡构成专用于集群通信的私网，如果是双机配置，私网之间可以通过交叉网线来连接3 公网与私网建议使用不同的 TCP/IP 子网地址 1.3.2 网络设置 在执行进一步操作之前，确认下列几点：  两台服务器之间在所有网络地址上可以相互 ping 通。  正确设置了名字 - 地址解析，建议在每台服务器的 /etc/hosts 文件中添加每台服务器的地址 - 名字对，地址使用公网地址。验证可以成功地 ping 两台服务器的名字。  特别注意对于 127.0.0.1 的设置，不要使用主机名，应该类似：127.0.0.1 localhost.localdomain localhosts# 下面加入的是两台服务器的静态公网地址与主机名映射192.168.0.1 server1192.168.0.2 server2# 下面加入对外虚拟 IP 地址，提供一个名字作映射10.110.81.100 server1.3 /etc/fstab 文件操作系统的安装会缺省使用 LABEL 而不是设备名来标识各个文件系统的分区，修改 /etc/fstab 文件，将“ LABEL= ” 替换为设备名，如 /dev/sda1 安装 LifeKeeper 2.1安装 LifeKeeper Installation Support 光盘 / 软件包 2.1.1 需求LifeKeeper 要求系统已经安装好下列两个软件包：pdkshncurses4使用 rpm qa 命令验证上述软件包是否已经安装，如果没有，手工安装（对于 Red Hat AS 2.1, 位于操作系统光盘 2# ） 2.1.2 LifeKeeper Installation Support 介绍LifeKeeper Installation Support 是针对各种 Linux 发布的一个支持软件，需要首先进行安装。该支持包以光盘形式提供，但有时也会以一个 .img 或 .iso 格式文件提供，此时需要通过 mount 命令进行挂载，方法是：mount <img 或 iso 文件的全路径 > < 挂接点 > -t iso9660 o loop 2.1.3 LifeKeeper Installation Support 安装1 进入光盘或者挂载点2 执行 sh setup 或 ./setup ，进入自动安装，通过回答 y 或 n 选择安装相应的支持包。对于三明电信数据库服务器双机配置，安装时做如下选择 :  安装程序首先会显示检测到的操作系统版本：Your system appears to be running Red Hat Enterprise Linux < 版本号 >  提示是否安装 LifeKeeper Distribution Enabling Package for Red Hat 软 件包时选择“ Y ” :The LifeKeeper Distribution Enabling Package for Red Hat will now be installed. This package is needed in order for LifeKeeper to run properly.  接着提示安装 Java 运行环境，选择“ Y ” :You will need to install the Java Runtime Environment v1.4.1 on this system if you wish to administer LifeKeeper using the LifeKeeper GUI. You should ensure that the PATH variable in the /etc/default/LifeKeeper file contains the path to your java binary.  在提示是否创建 SCSI 设备节点时选择“ Y ”Do you wish to create additional SCSI disk device nodes (/dev/sd*)and SCSI generic device nodes (/dev/sg*)y  在提示是否在启动文件中加入 options scsi_mod max_scsi_luns=255 时，选 择“ N ”  对于提示是否安装 IPS 软件包时选择“ N ”  对于提示是否安装 CCISS 软件包时选择“ N ”  对于提示是否安装 HADR 时选择“ N ”  对于提示是否安装 HANFS 时选择“ N ”  最后是安装许可管理软件包，之后会询问是否在此时安装软件许可，回答“ n ”，我们将在后面单独安装。 2.2 安装 LifeKeeper Core Application 软件包 2.2.1 LifeKeeper Core Application 软件包清单LifeKeeper Core Application for Linux 包括下列个软件包：  steeleye-lk-cn-5.0.1.i386.rpm 为系统部件，例如内存、 CPU 、操作系统、 SCSI 磁盘子系统以及文件系统提供恢复和切换  steeleye-lkGUI-cn-5.0.1.i386.rpm 为 LifeKeeper 的管理和监测提供图形用户界面  steeleye-lkHLP-5.0.1.i386.rpm 这是基于 HTML 格式的在线产品信息  steeleye-lkIP-5.0.1.i386.rpm 提供 IP 地址的自动恢复和切换  steeleye-lkRAW-5.0.1.i386.rpm - 为使用原始 I/O 跳过核心缓冲的应用程序提供支持  steeleye-lkMAN-5.0.1.i386.rpm Linux 手册页（ Man Pages ） 2.2.2 安装 LifeKeeper Core Application 软件包进入软件包所在目录，使用下列命令安装全部软件：rpm ivh *.rpm单个软件包的安装可以使用命令：rpm ivh < 软件包名 > 2.3 安装 LifeKeeper Application Recovery Kit(ARK) 可选 LifeKeeper 应用恢复工具包 ( 简称 ARK) 为特定的应用和服务提供高可用性，每种 ARK 以一个 rpm 软件包的形式提供，使用如下命令进行安装：rpm ivh <ARK 软件包名 >配置下不需要安装 ARK 。 2.4 修改 LifeKeeper 配置文件LifeKeeper 的配置文件缺省为 /etc/default/LifeKeeper 。通常需要调整的参数为：  LKCHECKINTERVAL 这是设置 LifeKeeper 对服务器上保护的资源进行定时检测的周期，缺省为 120 秒，根据实际配置，一般可以修改为更小的值，比如 30 秒 2.5 验证 LifeKeeper 的安装可以使用下列命令验证 LifeKeeper 软件包安装是否被正确安装，验证单个软件包，使用命令：rpm -V <package name>rpm -qi <package name>查看已经安装的 LifeKeeper 软件包，可以使用命令：rpm qa|grep stee 2.6 启动 LifeKeeper当完成了所有的验证之后就可以在两台服务器上启动 LifeKeeper 了。 2.6.1 启动 LifeKeeper 服务器进程如果当前您的系统没有运行 LifeKeeper 则在所有服务器上以 root 用户身份输入如下命令# /opt/LifeKeeper/bin/lkstart 2.6.2 启动 LifeKeeper GUI 服务器进程同样以 root 用户运行命令# /opt/LifeKeeper/bin/lkGUIserver start注意：以上命令只需运行一次，以后每次系统重新启动时， LifeKeeper 会自动运行上述进程。 2.7 添加 LifeKeeper 管理用户 可选 LifeKeeper 缺省赋予 root 用户管理 LifeKeeper 集群的能力，如果不想使用 root 登陆 LifeKeeper 管理接口，可以使用下列命令添加一个集群管理用户：/opt/LifeKeeper/bin/lkpasswd < 新管理用户名 >命令会提示输入口令并确认口令，例如我们添加一个名为 lkadmin 的集群管理用户，则使用命令：/opt/LifeKeeper/bin/lkpasswd lkadmin 2.9 有关的 LifeKeeper 软件的其它管理任务注意： $LKROOT 代表 LifeKeeper 软件安装的根路径，缺省为 /opt/LifeKeeper 2.10.1 停止 LifeKeeper 服务如果需要在服务器上永久停止 LifeKeeper 服务，可以输入下列命令$LKROOT/bin/lkstop该命令同时会使所有 LifeKeeper 保护的资源处于退出服务状态，如果希望在停止 LifeKeeper 时保持资源 /应用的运行，可以使用：$LKROOT/bin/lkstop -f 2.10.2 查看 LifeKeeper 进程键入下列命令可以查看当前运行的所有 LifeKeeper 进程列表ps -ef | grep LifeKeeper 2.10.3 删除 LifeKeeper 软件如果需要完整的删除一台服务器上的 LifeKeeper 软件，首先必须执行下列操作：  将该服务器上已经配置好的资源进行处理：对于正在提供服务器的资源，执行“删除资源”操作；对于作为备份角色的资源，执行“取消扩展”的操作  完成所有资源清除后，删除该服务器上的所有通信路径执行下列命令停止 LifeKeeper GUI server:/opt/LifeKeeper/bin/lkGUIserver stop停止 LifeKeeper 服务 ( 参见 3.8.1 停止 LifeKeeper 服务 )执行下列命令，删除 LifeKeeper 软件rpm -e <LifeKeeper 软件包名 >LifeKeeper 软件包的删除次序是：先删除应用恢复工具包 (ARK) 软件，然后删除 Core Application 软件 , 最后删除 Installation Support 软件包注意：也可以使用桌面软件包管理工具进行 LifeKeeper 软件的删除。配置 LifeKeeper 注意：下面所有操作，如果不特别指出，是从主服务器上执行，本文档中出现的 server1 代表主服务器（主机）， server2 代表备份服务器（备机） 3.1 启动 LifeKeeperGUI 配置工具进入 LifeKeeper GUI 管理工具可以通过运行命令：/opt/LifeKeeper/bin/lkGUIapp则出现 LifeKeeper 登录界面： 可以使用 root 用户登录，也可以使用 2.8 中新建的用户进行登录。成功后进入下面界面：3.2 连接其他服务器在配置管理台界面点击 file 菜单中的 Connect 菜单，弹出下面界面 在 Server Name 编辑框中输入备份服务器的主机名，使用前面相同的用户登陆，成功后进入下列界面3.3 建立通信路径 ( “心跳” )首先我们在通过直联双机的网络连接（私网）上创建第一条通信路径（主心跳）在已建立连接界面中点击 Edit 菜单中的 Server 菜单中的 Create Comm Path 弹出如图所示的界面 点击“ Next> ”点击“ Next> ” 选择通信路径的类型为“ TCP ” , 按“ Next> ”后出现：选择私网地址作为心跳的 IP 地址，这里我们 192.168.0.x 是私网， 10.x.x.x 代表公网，点击 Next 后出现同样选择备机上的私网地址作为心跳的 IP 地址，点击 Next 后出现主心跳的优先级为 1 ，点击 Create选择“ Next> ” 完成通信路径的创建。此时 LifeKeeper GUI 管理界面中服务器的图标改变为如下情形：使用上述过程在连接公网的网络上创建优先级为 2 的备份 TCP 通信路径。 使用类似过程在连接双机的串行连接上创建的备份 TTY 通信路径。 至此完成集群的连接，下面进入资源的保护配置 3.4 创建资源层次 (resource hierarchy)3.4.1 创建 IP 资源 首先我们创建一个 IP 资源（虚拟 IP） , 该地址用作从外部访问 Oracle 数据库的地址。点击 Edit 菜单的 Resource 子菜单中的 Create Resource Hierarchy , 或者使用快捷工具栏中德小圆圈按钮，在弹出窗口的“ Select Recovery Kit ”下拉列表框中选择 IP ： 下一步是 Switchback Type（自动回切）设置，根据实际配置及用户需求，可以设置成 Automatic（自动回切），或者缺省的 Intelligent（不自动回切）接着选择 IP 资源的主服务器：输入要创建的虚拟 IP 地址：选择正确的子网掩码：选择虚拟 IP 所在的网卡设备（公网接口） ：下面选择备份网卡，如果只有一块网卡连接公网，则对于“ Backup Interface ”选择“ none ” :LifeKeeper 提供缺省的名字来标记每个资源，这个名字称为 Tag, 建议使用缺省的标记名称随后的界面显示创建虚拟 IP 地址的过程：至此 ,IP 地址资源已经在主服务器上创建成功，在 GUI 窗口中可以看到新创建的地址，为了使该地址得到保护，我们需要将其“扩展”到备份服务器上，选择“ Continue ”可以进入“扩展”操作：备份服务器 server2 即是“扩展”操作的目标服务器( Target Server )，如果备份服务器上的网卡设备与刚才配置的主服务器的配置一样 , 可以在此点击 Accept Defaults 按钮使用默认选项 , 否则选择 Next> 进行逐项确认，确认的内容包括： （1）  switchback Type （2）主服务器（在扩展操作中被称为模版服务器 Template ）的优先级，缺省为 1（3） 备份服务器（在扩展操作中被称为目标服务器 Target ）的优先级，缺省从 10 开始，依次为 20 、 30 在执行完一切检查后，显示：点击 Next>, 继续确认一些设置，包括： （4 ）所扩展的 IP 资源 （5 ）子网掩码（6 ）虚拟 IP 所在的网络接口（7 ）选择备机上是否有连接公网的备份网络接口：（8 ）备机上 IP 资源的标记名，缺省与主机上的标记名相同选择“ Extend ”，完成扩展操作，在成功后，显示如果还有第三台服务器来保护这个 IP 地址，选择 Next Server 继续另一次扩展，否则点击 Finish ，显示点击 Done 按钮，至此，完成 IP 资源配置。我们将在 GUI 管理窗口中，看到刚才创建的地址资源，如下图注意：为了使虚拟 IP 地址能够正确地被解析，需要设置 DNS 服务器或者在每台主机的 /etc/hosts 文件中增添一个新的项目，可以给虚拟 IP 地址一个新名字，该名字必须区别于两台服务器的主机名  3.4.2 创建文件系统资源注意：在创建文件系统资源前，首先在主服务器上手工 mount 好资源阵列，备份服务器上不需要做 mount, 这里假定我们磁盘阵列的 mount 点是 /u02同样在 GUI 窗口中选择“ Edit ”菜单中“ Resource ”子菜单的“ Create Resource Hierarchy ” , 选择“ File System ”：如下图 为文件系统资源选择自动回切类型 (Switchback Type), 注意与其他资源的选择保持一致选择已经 mount 好磁盘阵列的主服务器：点击 Next 之后，等待一定的时间， LifeKeeper 会找到已经 mount 的磁盘阵列，如下如所示：如果没有找到 mount 点，系统会提示：此时，需要退出进行系统纠错。在找到 mount 点后，点击 Next>, 出现下列界面，提示缺省的资源标记： 选择默认值后点击 Create Instance ， 稍等几秒钟后弹出下列界面，显示创建资源的过程成功后，点击 Next>, 出现：此时已经成功在主服务器上创建了文件系统（磁盘这列）资源，选择“ Continue ”可继续将资源“扩展”到备份服务器上，同样确认一些设置。注意：如果在大多数情况下，你可以安全地选择“ Accept Default ”而不需要回答下面的一系列提示（1）   扩展的目的服务器（备机） （2）  自动回切设置（3）主服务器（在扩展操作中被称为模版服务器 Template ）的优先级，缺省为 1（4 ）备份服务器（在扩展操作中被称为目标服务器 Target ）的优先级，缺省从 10 开始，依次为 20 、 30 在执行完一切检查后，显示：点击 Next>, 继续确认一些设置，包括： （5 ）备机上 mount 磁盘阵列的位置，缺省与主机相同（6 ）备机上文件系统资源的标记名称。缺省与主机相同按下 Next> 之后， LifeKeeper 完成文件系统资源的扩展，显示：点击 Finish ，完成文件系统资源的创建。显示：在 LifeKeeper GUI 管理窗口中，可以看到新创建的文件系统资源：3.4.3 创建 Oracle 应用资源3.4.3.1 Oracle 应用保护Oracle 应用如果要对外提供服务，一定要使用 LifeKeeper 创建的虚拟 IP 地址，而不要使用主机名。 LifeKeeper 保护 Oracle 应用，这里是通过 Generic Application 这种资源类型，它提供一个脚本接口来管理用户应用的启动、停止和检测。 实现最基本的应用保护，需要三个脚本：  Restore 脚本 该脚本负责启动 oracle 应用  Remove 脚本 该脚本负责停止 Oracle 应用  quickCheck 脚本 可选 该脚本负责监测 Oracle 应用是否处于正常运行状态* 此处根据要求，只使用前两个脚本，不使用 quickCheck 脚本这 3 个脚本使用 Linux shell 语言开发，可以取任何名字，不过为了方便管理，建议在各自的名字中包含 restore, remove 以及 check 之类的字样，脚本必须具有可执行属性。 如果脚本的功能执行正确，则返回 0 ，否则返回其他值（一般为大于 0 的整数），比如， restore 脚本返回 0 ，则表明用户应用启动正确，已经处于运行状态，而 check 脚本返回 1 则表明用户应用发生失败或异常，需要进行切换。 脚本开发完成后，可以在主机上手工分别运行它们，看这些脚本是否功能正确。完成测试后，连同其他脚本一起放到主机的 /opt/LifeKeeper/ora8i 目录下。 3.4.3.2 步骤注意：在创建应用资源之前，先停止 Oracle ，不要让其处于运行状态在主机上进入 LifeKeeper GUI 管理界面，从“ Edit ” 菜单“ Resource ”子菜单中选择“ Create Resource Hierarchy ”，在列表框中选择“ Generic Application ” 点击 Next ，选择自动回切类型：选择资源创建的主机：在提示 Restore 脚本时，输入 restore 脚本的全路径 , 这里用 /opt/LifeKeeper/ora8i/restore ：接着是 remove 脚本，这里是 /opt/LifeKeeper/ora8i/remove ：接着是 QuickCheck 脚本，这个脚本是可选的，如果用户不提供该脚本，可以将输入框清除，保留为空，此时， LifeKeeper 不再定时检测该应用是否运行正常，而只在主机系统发生失败时随其他资源一起切换到备机上。这里根据要求清除为空在输入这些脚本后，给自己的应用资源输入一些特征信息，这是可选的内容，可以将此输入框清除为空选择在创建完应用资源后，将应用在主机上运行起来：最后给自己的应用资源取一个容易记忆的标记名称，这里用 oracle ： 完成后，按 Next, 进入将应用资源扩展到备机上的操作。 注意：如果按下 Next 之后长时间停留在该界面上，并且 LifeKeeper GUI 窗口中主机已经显示有创建好的资源，则可以关闭该窗口，从菜单中选择“ Extend Resource Hirerarchy ”进行资源的扩展 选择 Continue 进入应用资源的扩展：在选择好备机后，可以直接点击“ Accept Defaults ”完成扩展操作，在扩展操作中， LifeKeeper 会将相关的应用脚本传送到备机上，无需手工操作直到成功完成扩展，出现：.5 建立资源之间的依赖关系注意：在建立资源依赖关系前必须确认所有的资源已经正确配置，并且在主机上均处于运行状态 3.5.1. 资源依赖关系描述资源依赖是指某一资源的正常运行的前提是其他某项或几项资源处于正常运行状态。例如 Oracle 要能在主机 / 备机上正常运行，必须相应的磁盘资源（文件系统或裸设备）已经在主机 / 备机上处于运行状态，同时 Oracle 侦听服务所需的虚拟 IP 地址也在主机 / 备机上提供服务。 3.5.2 创建资源依赖关系确定应用资源位于最上层（根），它依赖 Oracle 资源，而 Oracle 资源依赖 IP 资源和裸设备 / 文件系统资源。如果资源 A 依赖资源 B, 则创建资源依赖的方法是在资源 A 上使用鼠标右键点击，在弹出菜单中选择“ Create Dependency ” 然后在“ Child Resource Tag ”中选择资源 B 的标记点击 Next 后选择“ Create Dependency ”完成依赖注意：如果要删除依赖关系，同样可以通过鼠标右键点击相应资源，从弹出菜单中选择“ Delete Denpendency ” 3.5.3 创建 Oracle 应用与 IP 地址资源和文件系统资源之间的依赖关系根据需要，我们要让 IP 资源（虚拟 IP 地址）和文件系统资源 ( 共享存储 ) 成为 Oracle 资源所依赖的资源，分别创建依赖关系，让 Oracle 成为父资源（根节点）， IP 和文件系统资源成为子资源（叶子节点）3.6 设置正常关机切换当系统管理员执行 shutdown 命令关闭 / 重启服务器时，你可以设置该服务器上正在提供服务的资源是否切换到备份服务器上，方法如下在 LifeKeeper GUI 管理界面中，点击主服务器图标，弹出如图菜单 选择“ Preperties ” , 出现：如果设置正常关机切换，在 Shutdown Strategy 后面的下拉列表框中选择 Switchover Resource （缺省设置正常关机不切换“ Do not Switchover Resource ”）， 然后点击 Apply ，按 OK 返回，完成设置 注意：这种设置是针对服务器的，即每台服务器独立设置自己是否关机切换资源 3.7 设置资源自动回切 可选 资源自动回切是指资源只要主服务器可用就尽量运行在主服务器上，当主服务器正常或异常重启后， LifeKeeper 会检查是否有资源需要在该服务器上运行在 LifeKeeper GUI 界面点击主服务器上的某一资源，点击右键弹出如图菜单 选择“ Preperties ” , 出现：在 Switchback 后面的下拉列表框中选择 On （ Automatic ）可设置资源自动回切（缺省是 Off 不自动回切），点击 Apply 后，再点击 OK 返回完成设置注意：该设置针对每个资源，而相互依赖的资源设置必须一致 ifeKeeper 命令行管理工具 注意：如果不特别说明，这里提到的命令行工具可以在 /opt/LifeKeeper/bin 目录下找到。 4.1 检测 LifeKeeper 集群运行状态可以使用 lcdstatus 命令对 LifeKeeper 集群的当前运行状态进行检查，命令格式：lcdstatus -q -d < 主机名 > 该程序向 stdout 输出在 LifeKeeper 资源层次配置状态和通信路径的状态 .选项 -q 表示输出采用简略的形式（建议使用该选项）选项 -d 表示要检查的主机，缺省检查本机 4.2 管理 LifeKeeper 中的资源注意：如果能运行 LifeKeeper GUI ，则使用其提供菜单命令执行相应操作；在执行命令行启动 / 停止资源前，一定先使用 lcdstatus 命令确认资源的实际状态。 4.2.1 启用资源 (In-Service)可以使用命令：/perform_action -t < 资源标记名 > -a restore将资源标记名所对应的资源在本机上投入服务（启动）。如果该资源在命令使用前已经在另一台机器上处于运行状态，则本命令执行的结果相当于执行了一次手工切换 ！如果该资源在命令使用前是处于停止状态（即在备机上执行本命令），则本命令执行的结果相当于执行了一次手工切换4.2.2 停止资源 (out-of-service)可以使用命令：./perform_action -t < 资源标记名 > -a remove将资源标记名所对应的资源在本机上停止服务。如果该资源在命令使用前已经在另一台机器上处于运行状态，则本命令执行不产生任何结果 注意： 在执行命令行前后，一定先使用 lcdstatus 命令确认资源的当前状态。 命令停止 / 启动本地的资源 命令中的 < 资源标记名 > 是区分大小写的 一定要等待命令完成，注意命令的输出。 详细用法见在线帮助手册。 4.3 获取 LifeKeeper 支持所需要的文件 在遇到集群运行故障而需要进行诊断时， LifeKeeper 的技术支持人员需要获取相应的 LifeKeeper 日志记录和其他信息，这可以通过运行下列命令实现，在两台服务器上分别运行下列命令，生成的打包文件位于 /tmp/lksupport 目录下：/opt/LifeKeeper/bin/lksupport1 2 3 4 5 6 7