项目部署之后弊端
问题描述1:当数据库宕机之后,可能导致数据丢失,必须通过某些策略,保证数据的有效性.
问题描述2: 如果后端数据库宕机,则通过某些技术手段可以实现高可用(可以实现自动的故障迁移)
数据库数据同步
数据库数据同步的流程图
目的:为了保证数据不丢失
数据库热备份原理图
冷备份说明: 定期将数据库内容进行转储. 弊端:可能丢失数据. 公司中也会采用冷备份的方式以防万一.
)数据库热备份原理
特点:可以保证数据的实时备份.
工作原理说明:
1.数据库主库将更新的数据信息写入到二进制日志文件中.
2.数据库从库通过IO线程去主库中获取二进制文件修改内容. 之后写入到中继日志中
3.数据库从库中的Sql线程读取中继日志中的信息,实现数据的同步.
并且为了降低组件之间的耦合性,采用异步的方式处理.
准备第二台Linux操作系统
复制虚拟机文件
运行虚拟机-并且修改名称
修改虚拟机IP地址
规定: 主机IP地址 192.168.126.129 从机 192.168.126.130
1).进入修改IP地址目录
cd /etc/sysconfig/network-scripts/
修改配置文件信息
重置网卡
在slave中安装数据库
根据之前的笔记自己独立完成数据库安装
利用sqlYog工具链接从库
实现数据库导入导出
说明:在实现数据库主从之前,最好让主库和从库的数据一致.
数据库主从配置
开启数据库二进制文件
说明:默认条件下 数据库二进制文件是关闭的.如果需要开启,则必须手动配置. 之后重启数据库.
修改配置文件: vim /etc/my.cnf
修改之后,重启数据库
从库开启二进制文件
说明:修改从库之后,重启数据库
执行重启数据库指令
查询主库状态
说明:在数据库中执行如下指令
命令: show master status;
主从数据库挂载
说明:如果需要实现数据库的主从同步,应该由从库向主库进行挂载.
/*130是从机 实现主从的挂载 host/port/user/password/二进制文件/位置*/change MASTER to MASTER_HOST=\"192.168.126.129\",MASTER_PORT=3306,MASTER_USER=\"root\",MASTER_PASSWORD=\"root\",MASTER_LOG_FILE=\"mysql-bin.000001\",MASTER_LOG_POS=245;/*开启主从服务*/start slave;/*检查主从同步状态*/show SLAVE status;
主从状态说明
挂载报错的说明
1.先查询日志信息
2.修改数据库配置之后重启
3.停止主从服务 STOP SLAVE;
4.重新挂载数据库
/*130是从机 实现主从的挂载 host/port/user/password/二进制文件/位置*/CHANGE MASTER TO MASTER_HOST=\"192.168.126.129\",MASTER_PORT=3306,MASTER_USER=\"root\",MASTER_PASSWORD=\"root\",MASTER_LOG_FILE=\"mysql-bin.000001\",MASTER_LOG_POS=245;/*开启主从服务*/START SLAVE;
测试主从同步
说明:操作数据库主库,检查数据库从库是否正确.
数据库读写分离-负载均衡机制
读写分离说明
当数据库执行写操作时,应该操作主库. 如果用户进行读操作时应该读从库.
实现该机制需要准备一个代理数据库服务器.
Mycat介绍
Mycat安装
解压Mycat安装包
tar -xvf Mycat-server-1.7.0-DEV-20170416134921-linux.tar.gz
server.xml
注意事项: 数据库代理的端口号 8066端口
<!--用户标签--><user name=\"root\"><property name=\"password\">root</property><!--与schema.xml中的配置相同 注意数据库的大小写--><property name=\"schemas\">jtdb</property></user><user name=\"user\"><property name=\"password\">user</property><property name=\"schemas\">jtdb</property><property name=\"readOnly\">true</property></user>
schema.xml
配置说明:该配置表示了读写分离/负载均衡的设置
<writeHost host=\"hostM1\" url=\"192.168.126.129:3306\" user=\"root\" password=\"root\"><!--读数据库1--><readHost host=\"hostS1\" url=\"192.168.126.130:3306\" user=\"root\" password=\"root\" /><!--读数据库2--><readHost host=\"hostS2\" url=\"192.168.126.129:3306\" user=\"root\" password=\"root\" /></writeHost>
上传配置文件
删除原有配置文件信息
rm -rf schema.xml server.xml
上传新的配置文件
启动mycat服务器
启动mycat ./mycat start
启动效果:
修改数据源配置
spring:datasource:#引入druid数据源#type: com.alibaba.druid.pool.DruidDataSource#driver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://192.168.126.129:8066/jtdb?serverTimezone=GMT%2B8&useUnicode=true&characterEncoding=utf8&autoReconnect=true&allowMultiQueries=trueusername: rootpassword: root
负载均衡测试
启动程序链接数据库,检查数据访问是否正常。之后修改从库信息 检查负载均衡是否正确。
数据库的双机热备
数据库搭建原理
双主模式配置
注意事项: 搭建之前保证数据库的数据一致(更新操作)!!!
1).检查主库的状态
实现主从挂载
/*我之前是主库 现在是从库*/CHANGE MASTER TOMASTER_HOST=\"192.168.126.130\",MASTER_PORT=3306,MASTER_user=\"root\",MASTER_PASSWORD=\"root\",MASTER_LOG_FILE=\"mysql-bin.000001\",MASTER_LOG_POS=482;/* 启动主从服务*/start slaveshow SLAVE status;
配置数据库高可用
什么是数据库高可用
说明: 当其中有一台数据库宕机之后,用户依然可以正确的访问数据库不受任何影响,(实现了故障迁移).主要数据库能够正常的工作,则重新启动数据库之后则可以实现自动的数据的同步.
实现数据库高可用配置
<?xml version=\"1.0\"?><!DOCTYPE mycat:schema SYSTEM \"schema.dtd\"><mycat:schema xmlns:mycat=\"http://io.mycat/\"><!--name属性是自定义的 dataNode表示数据库的节点信息 jtdb表示逻辑库--><schema name=\"jtdb\" checkSQLschema=\"false\" sqlMaxLimit=\"100\" dataNode=\"jtdb\"/><!--定义节点名称/节点主机/数据名称--><dataNode name=\"jtdb\" dataHost=\"localhost1\" database=\"jtdb\" /><!--参数介绍--><!--balance 0表示所有的读操作都会发往writeHost主机 --><!--1表示所有的读操作发往readHost和闲置的主节点中--><!--writeType=0 所有的写操作都发往第一个writeHost主机--><!--writeType=1 所有的写操作随机发往writeHost中--><!--dbType 表示数据库类型 mysql/oracle--><!--dbDriver=\"native\" 固定参数 不变--><!--switchType=-1 表示不自动切换, 主机宕机后不会自动切换从节点--><!--switchType=1 表示会自动切换(默认值)如果第一个主节点宕机后,Mycat会进行3次心跳检测,如果3次都没有响应,则会自动切换到第二个主节点--><!--并且会更新/conf/dnindex.properties文件的主节点信息 localhost1=0 表示第一个节点.该文件不要随意修改否则会出现大问题--><dataHost name=\"localhost1\" maxCon=\"1000\" minCon=\"10\" balance=\"1\"writeType=\"0\" dbType=\"mysql\" dbDriver=\"native\" switchType=\"1\" slaveThreshold=\"100\"><!--心跳检测策略--><heartbeat>select 1</heartbeat><!--配置第一台主机主要进行写库操作,在默认的条件下Mycat主要操作第一台主机在第一台主机中已经实现了读写分离.因为默认写操作会发往137的数据库.读的操作默认发往141.如果从节点比较忙,则主节点分担部分压力.--><writeHost host=\"hostM1\" url=\"192.168.126.129:3306\" user=\"root\" password=\"root\"><!--读数据库1--><readHost host=\"hostS1\" url=\"192.168.126.130:3306\" user=\"root\" password=\"root\" /><!--读数据库2--><readHost host=\"hostS2\" url=\"192.168.126.129:3306\" user=\"root\" password=\"root\" /></writeHost><!--定义第二台主机 由于数据库内部已经实现了双机热备.--><!--Mycat实现高可用.当第一个主机137宕机后.mycat会自动发出心跳检测.检测3次.--><!--如果主机137没有给Mycat响应则判断主机死亡.则回启东第二台主机继续为用户提供服务.--><!--如果137主机恢复之后则处于等待状态.如果141宕机则137再次持续为用户提供服务.--><!--前提:实现双机热备.--><writeHost host=\"hostM2\" url=\"192.168.126.130:3306\" user=\"root\" password=\"root\">-<!--读数据库1--><readHost host=\"hostS1\" url=\"192.168.126.130:3306\" user=\"root\" password=\"root\" /><!--读数据库2--><readHost host=\"hostS2\" url=\"192.168.126.129:3306\" user=\"root\" password=\"root\" /></writeHost></dataHost></mycat:schema>
实现数据库高可用
1).将修改好的配置文件导入mycat
重启mycat服务器
测试数据库高可用
先将主库宕机,之后查询数据,之后重启主库 检查主从同步的状态是否正确.