技术文章——《Mysql集群架构》

分类：MySQL作者：编程之家用户

《技术文章——《Mysql集群架构》》要点：
本文介绍了技术文章——《Mysql集群架构》，希望对您有用。如果有疑问，可以联系我们。

1.主要内容

1)mysql的架构,锁,最佳实践,事务

2)mysql的命令行,主从复制,索引,数据备份/恢复

3)mysql的集群,mysql的负载均衡,监控,mysql proxy

4) mysql的MMM架构,mysql 的源码,DBA

技术文章——《Mysql集群架构》

MySQL-从删除到跑路

2.具体内容

2.1)【架构】：

【架构图】：

技术文章——《Mysql集群架构》

MySQL-MySQL的架构图

【概述】：Mysql是由SQL接口,解析器,优化器,缓存,存储引擎组成的

2.2)【锁】：

【概念】：为了保证数据的一致完整性,任何一个数据库都存在锁定机制.锁定机制的优劣直接应想到一个数据库系统的并发处理能力和性能,所以锁定机制的实现也就成为了各种数据库的核心技术之一.

【分类】：MySQL各存储引擎使用了三种类型(级别)的锁定机制：行级锁定,页级锁定和表级锁定

1)行级锁定：锁定对象的颗粒度很小,消耗最大,行级锁定也最容易发生死锁,但是并发好

2)表级锁定：死锁情况少,但是并发不好,

3)页级锁定：介于前两者之间.

【代码】：

1)锁定 LOCK TABLES tbl_name [AS alias]

2)解锁 UNLOCK TABLES

2.3)【最佳实践】：

【为查询缓存优化你的查询】：

技术文章——《Mysql集群架构》

【mysql强制索引和禁止某个索引】：

1) mysql强制使用索引:force index(索引名或者主键PRI)：select * from table force index(PRI,ziduan1_index) limit 2;(强制使用索引”PRI和ziduan1_index”)

2) mysql禁止某个索引：ignore index(索引名或者主键PRI)：select * from table ignore index(PRI,ziduan1_index) limit 2;(禁止使用索引”PRI,ziduan1_index”)

2.4)【事务】：

【概念】：事务是指逻辑上的一组操作,组成这组操作的各个单元,要不全成功要不全失败.其特点是ACID(原子性,一致性,隔离性,持久性)

【实现】：

1)事务开启：START TRANSACTION; 或者 BEGIN;

2)事务提交：COMMIT;

3)事务回滚：ROLLBACK;

2.5)【mysql 命令行】：

【命令行执行mysql】:使用mysql的-e参数可以执行各种sql的(创建,删除,增,删,改、查)等各种操作

例如：#创建数据库

create_db_sql="create database IF NOT EXISTS ${DBNAME}”

mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} -e "${create_db_sql}"

2.6)【主从复制】：

【一主多从】：在一主多从的数据库体系中,多个从服务器采用异步的方式更新主数据库的变化,业务服务器在执行写或者相关修改数据库的操作是在主服务器上进行的,读操作则是在各从服务器上进行

技术文章——《Mysql集群架构》

MySQL-MySQL的主从复制

【原理】 ：MySQL之间数据复制的基础是二进制日志文件(binary log file).一台MySQL数据库一旦启用二进制日志后,其作为master,它的数据库中所有操作都会以“事件”的方式记录在二进制日志中,其他数据库作为slave通过一个I/O线程与主服务器保持通信,并监控master的二进制日志文件的变化,如果发现master二进制日志文件发生变化,则会把变化复制到自己的中继日志中,然后slave的一个SQL线程会把相关的“事件”执行到自己的数据库中,以此实现从数据库和主数据库的一致性,也就实现了主从复制.

2.7)【索引】：

【概述】：索引对查询的速度有着至关重要的影响,理解索引也是进行数据库性能调优的起点

【种类】：普通索引,唯一索引,全文索引,单列/多列索引,组合索引(最左前缀)

【B+树】：

技术文章——《Mysql集群架构》

MySQL-索引B+树结构

1)详解B+树：浅蓝色的块我们称之为一个磁盘块,可以看到每个磁盘块包含几个数据项(深蓝色所示)和指针(黄色所示),如磁盘块1包含数据项17和35,包含指针P1、P2、P3,P1表示小于17的磁盘块,P2表示在17和35之间的磁盘块,P3表示大于35的磁盘块.真实的数据存在于叶子节点即3、5、9、10、13、15、28、29、36、60、75、79、90、99.非叶子节点只不存储真实的数据,只存储指引搜索方向的数据项,如17、35并不真实存在于数据表中.

2)查找B+树：如果要查找数据项29,那么首先会把磁盘块1由磁盘加载到内存,此时发生一次IO,在内存中用二分查找确定29在17和35之间,锁定磁盘块1的P2指针,内存时间因为非常短(相比磁盘的IO)可以忽略不计,通过磁盘块1的P2指针的磁盘地址把磁盘块3由磁盘加载到内存,发生第二次IO,29在26和30之间,锁定磁盘块3的P2指针,通过指针加载磁盘块8到内存,发生第三次IO,同时内存中做二分查找找到29,结束查询,总计三次IO.真实的情况是,3层的b+树可以表示上百万的数据,如果上百万的数据查找只需要三次IO,性能提高将是巨大的,如果没有索引,每个数据项都要发生一次IO,那么总共需要百万次的IO,显然成本非常非常高.

2.8)【数据备份/恢复】：

【数据备份】：

1)使用mysqldump命令备份mysqldump -u username -p --databases dbname2 dbname2 > Backup.sql

2)直接复制整个数据库目录 ： 需要停止服务,不支持InnoDB引擎

3)热备份：使用mysqlhotcopy工具快速备份,不用停止服务. mysqlhotcopy [option] dbname1 dbname2 backupDir/

【数据还原】：

1)还原使用mysqldump命令备份的数据库： mysql -u root -p < C:\backup.sql

2)还原直接复制目录的备份： 必须保证两个MySQL数据库的版本号是相同的.MyISAM类型的表有效,对于InnoDB类型的表不可用

2.9)【mysql的集群】：

【概念】：MySQL 集群(MySQL Cluster )是mysql适合于分布式计算环境的高实用、高冗余版本.它采用了NDB Cluster 存储引擎,允许在1个 Cluster 中运行多个MySQL服务器.在MyQL 5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了该存储引擎.

技术文章——《Mysql集群架构》

MySQL-MySQL集群架构图

【分类】：分为同步集群和异步集群.

1)同步集群：(mysql cluster)

结构：(data + sql + mgm节点)

特点：

1. 1) 内存级别的,对硬件要求较低,但是对内存要求较大.换算比例为：1：1.1；

1.2) 数据同时放在几台服务器上,冗余较好；

1.3) 速度一般；

1.4) 建表需要声明为engine=ndbcluster

1.5) 扩展性强；

1.6) 可以实现高可用性和负载均衡,实现对大型应用的支持；

1.7) 必须是特定的mysql版本,如：已经编译好的max版本；

1.8) 配置和管理方便,不会丢失数据

2)异步集群(mysql replication)

结构：(master + slave)

特点：

2.1) 主从数据库异步数据；

2.2) 数据放在几台服务器上,冗余一般；

2.3) 速度较快；

2.4) 扩展性差；

2.5) 无法实现高可用性和负载均衡(只能在程序级别实现读写分离,减轻对主数据库的压力)；

2.6) 配置和管理较差,可能会丢失数据

2.10)【mysql的负载均衡】：

【定义】： 通过director,将用户的请求分发到real server服务器上,然后返回给用户.负载均衡部署灵活、能够满足各种需求.

技术文章——《Mysql集群架构》

MySQL-LVS+Keepalived实现mysql负载均衡

【实现方式】：

硬件：BIG/IP、Cisco、IBM(昂贵)

软件：LVS(免费)

LVS系统将用户的请求的数据包在数据层和网络层进行了封装和转发,由三种方式满足各种需求.

1) DR：直接路由

2) Tuning：tcp/ip隧道

3) NAT：网络地址转换

2.11)【mysql的监控】：

【监控内容】：监控数据库的日常会话情况.碎片、剩余表空间监控,及时了解表空间的扩展情况、以及剩余空间分布情况

【代码实现】：https://github.com/wozhuzaisi/shell-work/blob/master/mysqlmonitor.sh

2.12)【mysql proxy】：

【定义】：MySQL Proxy是一个处于你的client端和MySQL server端之间的简单程序,它可以监测、分析或改变它们的通信.它使用灵活,没有限制,常见的用途包括：负载平衡,故障、查询分析,查询过滤和修改等等

【实现读写分离】：

1)安装并配置mysql proxy.

2)测试：主服务器mysql> grant all on *.* to'lin3615'@'192.168.179.142'identified by'123456’;

2.14)【mysql MMM架构】：

【概述】：是一套支持双主故障切换和双主日常管理的脚本程序.由于MMM无法完全的保证数据一致性,所以MMM适用于对数据的一致性要求不是很高,但是又想最大程度的保证业务可用性的场景.对于那些对数据的一致性要求很高的业务,非常不建议采用MMM这种高可用架构.

技术文章——《Mysql集群架构》

MySQL-MMM架构图

2.15)【mysql 源码】：

【内容】：MySQL是由C++写的,入口函数main()直接调用了mysqld_main().Server启动的代码都在这里,直到最后的 handle_connections_sockets().

技术文章——《Mysql集群架构》

MySQL-MySQL的源码第一书

【资料】：

下载pdf:《深入MySQL源码》

官网手册: https://dev.mysql.com/doc/internals/en/

阅读源码：https://zhuanlan.zhihu.com/p/26118810

书籍：《深入理解MySQL核心技术》

2.16)【DBA】：

【职责】：

技术文章——《Mysql集群架构》

MySQL-DBA思维导图

1)数据库安装；

2)数据库配置和管理；

3)权限设置和安全管理；

4)监控和性能调节；

5)备份和恢复；

6)解决一般的问题；

技术文章——《Mysql集群架构》

MySQL-DBA的一天

《技术文章——《Mysql集群架构》》是否对您有启发，欢迎查看更多与《技术文章——《Mysql集群架构》》相关教程，学精学透。编程之家PHP学院为您提供精彩教程。

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

MySQL为Null会导致5个问题，个个致命！
在正式开始之前，我们先来看下 MySQL 服务器的配置和版本号信息，如下图所示： “兵马未动粮草先行”，看完了相关的配置之后，我们先来创建一张测试表和一些测试数据。 -- 如果存在 person 表先删除 DROP TABLE IF EXISTS person; -- 创建 person 表，其中
MySQL全面瓦解30：备份与恢复
&gt; [合辑地址：MySQL全面瓦解](https://www.cnblogs.com/wzh2010/category/1859594.html &quot;合辑地址：MySQL全面瓦解&quot;) # 1 为什么需要数据库备份 - 灾难恢复：当发生数据灾难的时候，需要对损坏的数据进行恢复和
MySQL全面瓦解28：分库分表
物理服务机的CPU、内存、存储设备、连接数等资源有限，某个时段大量连接同时执行操作，会导致数据库在处理上遇到性能瓶颈。为了解决这个问题，行业先驱门充分发扬了分而治之的思想，对大库表进行分割，&#xA;然后实施更好的控制和管理，同时使用多台机器的CPU、内存、存储，提供更好的性能。而分治有两种实现方式：垂直拆
MySQL全面瓦解29：分库分表之Partition功能详解
1 回顾 上一节我们详细讲解了如何对数据库进行分区操作，包括了 垂直拆分（Scale Up 纵向扩展）和&#160;水平拆分（Scale Out 横向扩展） ，同时简要整理了水平分区的几种策略，现在来回顾一下。 2 水平分区的5种策略 2.1 Hash（哈希） 这种策略是通过对表的一个或多个列的Ha
navicat查看某个表的所有字段的详细信息
navicat查看某个表的所有字段的详细信息 navicat设计表只能一次查看一个字段的备注信息，那怎么才能做到一次性查询表的信息呢？SELECT COLUMN_NAME,COLUMN_COMMENT,COLUMN_TYPE,COLUMN_KEY FROM information_schema.CO
Linux下一次数据仓库进行迁移记录
文章浏览阅读4.3k次。转载请把头部出处链接和尾部二维码一起转载，本文出自逆流的鱼yuiop：http://blog.csdn.net/hejjunlin/article/details/52768613前言：数据库每天的数据不断增多，自动删除机制总体风险太大，想保留更多历史性的数据供查询，于是从小的hbase换到大的hbase上，势在必行。今天记录下这次数据仓库迁移。看下Agenda:彻底卸载MySQL安装MySQL_linux服务器进行数据迁移
记一次MySQL数据库恢复（附方案）
文章浏览阅读488次。恢复步骤概要备份frm、ibd文件如果mysql版本发生变化，安装回原本的mysql版本创建和原本库名一致新库，字符集都要保持一样通过frm获取到原先的表结构，通过的得到的表结构创建一个和原先结构一样的空表。使用“ALTER TABLE DISCARD TABLESPACE;”命令卸载掉表空间将原先的ibd拷贝到mysql的仓库下添加用户权限 “chown . .ibd”,如果是操作和mysql的使用权限一致可以跳过通过“ALTER TABLE IMPORT TABLESPACE;”命令恢_alter table discard tablespace
MySQL大表优化方案
文章浏览阅读225次。当MySQL单表记录数过大时，增删改查性能都会急剧下降，可以参考以下步骤来优化：单表优化除非单表数据未来会一直不断上涨，否则不要一开始就考虑拆分，拆分会带来逻辑、部署、运维的各种复杂度，一般以整型值为主的表在千万级以下，字符串为主的表在五百万以下是没有太大问题的。而事实上很多时候MySQL单表的性能依然有不少优化空间，甚至能正常支撑千万级以上的数据量：字段尽量使用TINYINT、SMALLINT、MEDIUM_INT作为整数类型而非INT，如果非负则加上UNSIGNEDVARCHAR的长度只分配_开发项目 浏览记录表 过大怎么办
MySQL创建、删除用户
文章浏览阅读1.5k次。Mysql创建、删除用户MySql中添加用户,新建数据库,用户授权,删除用户,修改密码(注意每行后边都跟个;表示一个命令语句结束):1.新建用户登录MYSQL：@>mysql -u root -p@>密码创建用户：mysql> insert into mysql.user(Host,User,Password) values("localhost_删除mysql用户组
mysql字段默认字符串
MySQL是一种开源的关系型数据库管理系统，被广泛应用于各类应用程序的开发中。对于MySQL中的字段，我们需要进行数据类型以及默认值的设置，这对于数据的存储和使用至关重要。其中，有一个非常重要的概念就是MySQL字段默认字符串。 CREATE TABLE `my_...
mysql字符集正确的是
MySQL是一个流行的开源关系型数据库管理系统，广泛应用于Web应用程序开发、数据存储和管理。在使用MySQL时，正确设置字符集非常重要，以确保数据的正确性和可靠性。 在MySQL中，字符集表示为一系列字符和字母的集合。MySQL支持多种字符集，包括ASCII、UTF...
mysql存储函数 n以内偶数
MySQL存储函数 n以内偶数 MySQL存储函数能够帮助用户简化操作，提高效率，常常被用于计算和处理数据。下面我们就来了解一下如何使用MySQL存储函数计算n以内的偶数。 定义存储函数 首先，我们需要定义一个MySQL存储函数，以计算n以内的偶数。下...
mysql字符集以及校对规则
MySQL是一个流行的关系型数据库管理系统，基于客户机-服务器模式，可在各种操作系统上运行。 MySQL支持多种字符集，不同的字符集包括不同的字符，如字母、数字、符号等，并提供不同的排序规则，以满足不同语言环境的需求。 //查看MySQL支持的字符集与校对规...
mysql字符串截取后groupby
在MySQL数据库中，我们有时需要对特定的字符串进行截取并进行分组统计。这种操作对于数据分析和报表制作有着重要的应用。下面我们将讲解一些基本的字符串截取和分组统计的方法。 首先，我们可以使用substring函数对字段中的字符串进行截取。假设我们有一张表stude...
mysql字符串的查找函数
MySQL提供了多种字符串的查找函数。下面我们就一一介绍。 1. LIKE函数 SELECT * FROM mytable WHERE mycolumn LIKE 'apple%'; 其中"apple%"表示以apple开头的字符串，%表示任意多个字符...
mysql字符串不足补0
MySQL 是一种关系型数据库管理系统，广泛应用于各种不同规模和类型的应用程序中。在 MySQL 中，处理字符串数据是很常见的任务。有时候，我们需要在字符串的开头添加一定数量的 0 ，以达到一定的位数。比如，我们可能需要将一个数字转换为 4 位或 5 位的字符串，不足的...
mysql存什么类型数据类型
MySQL是一种流行的关系型数据库管理系统，支持多种数据类型。以下是MySQL所支持的数据类型： 1. 数值型数据类型： - TINYINT 保存-128到127范围内的整数 - SMALLINT 保存-32768到32767范围内的整数 - MEDIU...
mysql存emoji表情字段类型
MySQL中存储Emoji表情字段类型 在现代互联网生态中，表情符号已经成为人们展示情感和思想的重要方式之一，因此将表情符号存储到数据库中是一个经常出现的问题。MySQL作为最流行的开源关系型数据库管理系统之一，也需要能够存储和管理这些表情符号的字段类型。 UT...
mysql字符串存储类型数据
MySQL是一种关系型数据库管理系统。在MySQL数据库中，有多种不同的数据类型。而其中，最常见的数据类型之一就是字符串类型。在MySQL中，字符串类型的数据通常会被存储为TEXT或VARCHAR类型。 首先，让我们来看一下VARCHAR类型。VARCHAR是My...
mysql字符串取整
MySQL字符串取整知识详解 MySQL是一种开源的关系型数据库管理系统，广泛应用于各个领域。在使用MySQL过程当中，我们经常需要对数据进行取整操作。本文将介绍如何使用MySQL字符串取整来处理数据取整问题。 什么是MySQL字符串取整？ MySQL...
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot