圣凤凌霜 发表于 2018-10-2 12:48:47

heartbeat+drbd+mysql实现MySQL高可用

  系统环境:
  CentOS6.4-x86_64: node3.xxx.com(192.168.200.13/24)、node4.xxx.com(192.168.200.14/24)、VIP(192.168.200.20/24),两台服务器都是单网卡的.
  软件及版本:
  1、heartbeat-3.0.4-2.el6.x86_64
  2、drbd-8.4.3-33.el6.x86_64
  3、mysql-5.6.10-linux-glibc2.5-x86_64
  一、软件部署:
  1、drbd的安装需要安装两个包:drbd-8.4.3-33.el6.x86_64.rpm、drbd-kmdl-2.6.32-358.el6-8.4.3-33.el6.x86_64.rpm
# rpm -ivh drbd-*  2、heartbeat的安装需要安装的包:heartbeat、heartbeat-devel、heartbeat-pils、heartbeat-stonith,这些包可以通过epel源进行安装
# rpm -ivh epel-release-6-8.noarch.rpm  
# yum install heartbeat heartbeat-devel heartbeat-stonith heartbeat-pils
  3、MySQL的安装有源码包安装、二进制包(rpm包)安装、通用包,这里为了方便使用的是MySQL通用包mysql-5.6.10-linux-glibc2.5-x86_64,然后进行初始化,简单设置下配置文件即可使用,但数据库的初始化要在配置好drbd后才进行,因为要把MySQL的数据存放在drbd分区上
  二、软件配置:
  1、drbd配置:首先可以把/etc/drbd.d/global_common.conf修改为如下配置
global {  usage-count no;
  
}
  
common {
  handlers {
  pri-on-incon-degr "/usr/lib/drbd/notify-pri-on-incon-degr.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
  pri-lost-after-sb "/usr/lib/drbd/notify-pri-lost-after-sb.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
  local-io-error "/usr/lib/drbd/notify-io-error.sh; /usr/lib/drbd/notify-emergency-shutdown.sh; echo o > /proc/sysrq-trigger ; halt -f";
  fence-peer "/usr/lib/drbd/crm-fence-peer.sh";
  split-brain "/usr/lib/drbd/notify-split-brain.sh root";
  out-of-sync "/usr/lib/drbd/notify-out-of-sync.sh root";
  }
  syncer {rate 200M;}
  
}
  然后在/etc/drbd.d目录下添加一个资源配置文件,资源配置文件内容如下:
resource mydb {  protocol C;
  startup {
  outdated-wfc-timeout 100;
  wfc-timeout 120;
  degr-wfc-timeout 120;
  }
  net {
  cram-hmac-alg "sha1";
  shared-secret "Mysql-Ha";
  }
  disk {
  on-io-error detach;
  fencing resource-only;
  }
  device /dev/drbd0;
  on node3.xxx.com {
  meta-disk internal;
  address 192.168.200.13:7801;
  disk /dev/sdb1;
  }
  on node4.xxx.com {
  meta-disk internal;
  address 192.168.200.14:7801;
  disk /dev/sdb1;
  }
  
}
  上面的配置文件在两台服务器都是一样的,在一台配置好后,再复制到另外一台即可.配置文件配置好后,接下来是启动drbd了,但在启动之前要drbdadm create-md all来初化drbd磁盘的元数据,然后再启动drbd,drbd的启动要同时在两台服务器启动,操作过程如下:
两台服务器执行下面操作  
# drbdadm create-md all
  
# service drbd start
  2、上面的drbd启动完成,而且没有报错,接下来要做的是格式化drbd文件系统,建立好数据库的mysql帐号,创建drbd文件系统的挂载目录,初始化数据库
把其中一台服务器提升为drbd的主服务器  
#drbdadm primary all
  

  
# drbdadm -- --overwrite-data-of-peer primary all
  
# mkfs -t ext4 /dev/drbd0
  
# mkdir /data/drbd
  
# mount /dev/drbd0 /data/drbd
  
# useradd -r mysql
  
# mkdir /data/drbd/mysql
  
# chown mysql:mysql /data/drbd/mysql
  
# cd /usr/local && ln -s mysql-5.6.10-linux-glibc2.5-x86_64 mysql
  
# cd mysql && ./mysql_install_db --user=mysql --datadir=/data/drbd/mysql --basedir=/usr/local/mysql
  
# cp ./support-files/mysql.server /etc/init.d/mysqld
  
# service mysqld start
  至此如果mysql正常启动后,DRBD设备切换角色,再启动mysql,正常的话,就可以进行下面的通过heartbeat来实现mysql出现故障时drbd角色自动切换
  2、heartbeat的配置:首先在其中一台服务器创建修改配置文件,然后再复制到另外一台服务器即可.
# cd /etc/ha.d  
# cp /usr/share/doc/heartbeat-3.0.4/{ha.cf,haresources,authkeys} ./
  
ha.cf修改后的配置如下:
  
logfile /var/log/ha-log
  
logfacility local0
  
keepalive 2
  
deadtime 10
  
bcast   eth0      # Linux
  
auto_failback off
  
node node3.xxx.com
  
node node4.xxx.com
  
haaresources修改后的内容如下:
  
node3.xxx.com IPaddr::192.168.200.20/24/eth0 drbd::start drbddisk::mydb Filesystem::/dev/drbd0::/data/drbd::ext4 mysqld
  
authkeys修改后的内容如下:
  
auth 2
  
2 sha1 abc!
  这里需要特别说明的是,我在这里遇到两个问题,
  1) ha.cf里面的心跳信息传播方式如果选择ucast会有如下报错导致服务启动不 了,在网上查资料说是内核得升级才能解决问题:
  Mar 17 14:34:59 node3.xxx.com heartbeat: : ERROR: glib: ucast: error setting option SO_REUSEPORT(w): Protocol not available
  Mar 17 14:34:59 node3.xxx.com heartbeat: : ERROR: make_io_childpair: cannot open ucast eth0
  2)在启动heartbeat服务之前,我没有启动drbd服务,导致下面的错误产生:
  ResourceManager(default):      2014/03/17_14:49:47 ERROR: Return code 1 from /etc/ha.d/resource.d/drbddisk
     
      上面的问题解决后就是测试mysql故障后,资源是否会转移,到此我的测试已经通过的了。


页: [1]
查看完整版本: heartbeat+drbd+mysql实现MySQL高可用