MySQL 学习笔记二

23.提升回滚大表操作的方法

DBA有时会遇到操作一张大表,发现操作时间过长或者影响在线业务了,想要回退大表操作。对于提升大事务回滚效率,官方提供了两种方法:
一是增加innodb_buffer_pool_size参数大小,二是合理利用innodb_force_recovery=3参数,跳过事务回滚过程。第一种方式比较温和,innodb_buffer_pool_size参数是可以动态调整的,可行性也较高。第二种方式相较之下较暴力,但效果较好。
第二种方法操作流程如下:
kill -9 MySQL 进程;备份MySQL数据及日志目录;为MySQL Server设置innodb_force_recovery=3参数;然后启动MySQL进程;正常关闭MySQL Server进程;去掉innodb_force_recovery=3参数启动MySQL进程。完成恢复过程。(innodb_force_recovery这个参数一般都用于“严重故障排除场景”,生产环境慎用,若用于生产环境需首先明确innodb_force_recovery设置对现有生产数据可能的影响情况)。
在完成最后启动操作之后,错误日志种会记录一条“【note】Inn哦DB:Rollback of non-prepared transactions completed”信息。此方式无需等待事务回滚操作,完成上述操作步骤的时间即位环境恢复的时间。
两种方式各有自己的优点,第一种方式对线上业务系统影响较小,不会中断在线业务。第二种方式效果更显著,会短暂影响业务连续,回滚所有没有提交的事务。

24 关于log_error_verbosity参数设置

参数取值 影响范围 是否默认
1 errors only.
2 errors and warnings.
3 errors,warnings,and notes.the server logs aborted connections and access-denied errors for new connection attempts

25 Error log 文件切割

If you flush the error log using FLUSH ERROR LOGS,FLUSH LOGS,or mysqladmin flush-logs,the server closes and reopens any error log file to which it is writing. To rename an error log file,do so manually before flushing. Flushing the logs then opens a new file with the original file name. For example,assuming a log file name of host_name.err,to rename the file and create a new one,use the following commands:

mv host_name.err host_name.err-old 
mysqladmin flush-logs
mv host_name.err-old backup-directory

---应注意文件Owner,防止没有权限写操作

26 密码在general query log 中的体现

Passwords in statements written to the general query log are rewritten by the server not to occur literally in plain text. Password rewriting can be suppressed for the general query log by starting the server with the --log-raw option. This option may be useful for diagnostic purposes,to see the exact text of statements as received by the server,but for security reasons is not recommended for production use. --P853

 27 binlog文件大于定义的max_binlog_size的情况

A binary log file may become larger than max_binlog_size if you are using large transactions because a transaction is written to the file in one piece,never split between files.

28 关于参数binlog_cache_size的解读

binlog_cache_size:当事务开始时,MySQL会分配一个binlog_cache_size大小的缓冲区(默认32K)给session用于存储二进制日志的缓存。如果事务大于binlog_cache_size,线程将打开一个 临时文件 用于存储事务(默认 /tmp 下,参照参数tmpdir),当线程结束时,临时文件会自动删除。

 29 关于参数 binlog_error_action的解读

 binlog_error_action:默认值为ABORT_SERVER,会使MySQL在写binlog遇到严重错误时直接退出(即Crash动作),比如磁盘满了,文件系统不可写入等。在ABORT_SERVER选项下,binlog和从库都是安全的,这是官方选择此默认值的原因。

30.MySQL单条记录最大长度限制

Row Size Limits
The maximum row size for a given table is determined by several factors:
The internal representation of a MySQL table has a maximum row size limit of 65,535 bytes,even if the storage engine is capable of supporting larger rows.
BLOB and TEXT columns only contribute 9 to 12 bytes toward the row size limit because their contents are stored separately from the rest of the row.

MySQL Server 层的限制比较宽,一条记录不要超过65535个字节即可。也就是说,即使你的存储引擎支持更大的行长度,但是MYSQL 依然限制 Row size为65535;
BLOB and TEXT 这两种类型字段只占用行存储的9-12个字节,其他的内容分开存储。

31.InnoDB存储引擎下Row的长度限制

InnoDB关于Row的长度限制相对严格,一条记录的长度,不能超过innodb_page_size大小的一半(实际上还会略小,因为需要扣除页中关于页及记录的元数据信息)。如果页的大小是MySQL官方默认的16K,那么此时的单条记录的长度不能超过8126Byte。InnoDB是以B+树来组织数据的,所以InnoDB一个页至少包含两行数据(否在数据结构会退化成单链表)。

32.VARCHAR 类型字段最多能存储的字符数

在utf8mb4 编码中,字符的最大编码长度是4,比如中文;所以为了保证存储的字符串实际存储空间小于65535字节,字符串长度不能大于 floor(65535/4)=16383。

在latin1 编码字符集中,VARCHAR 类型字段最多能存储65533 个字符;
在utf8 编码字符集中,VARCHAR 类型字段最多能存储21844 个字符;
在utf8mb4 编码字符集中,VARCHAR 类型字段最多能存储16383 个字符;

33.index key 的最大长度限制

Both DYNAMIC and COMPRESSED row formats support index key prefixes up 3072 bytes.
This feature is controlled by the innodb_large_prefix configuration option,which is enabled by default. 

在DYNAMIC and COMPRESSED 行格式下默认支持索引长度不能超过3072字节.3072字节除以 utf8mb4 的最大编码长度4字节,在主键字段上长度上限应该是768;在utf8 编码字符集中,字符的最大编码长度是3字节,比如中文;所以如果 name作为主键,这个字段字符长度不能超过 3072/3=1024。

34.字段个数的限制

单表有多少个列也是有限制的:(1)Server层规定一个表的字段个数最多为4096个;(2)InnoDB层规定一个表的字段个数最多为1017个。

35.设置账号的过期时间

create user test@'%' identified by XXXXX' password expire interval 90 day;
alter ;
# 禁用过期,永久不过期:
' password expire never;
' password expire never;

 36  row-level locking and  InnoDB storage engine

InnoDB tables use row-level locking so that multiple sessions and applications can read from and write to the same table simultaneously,without making each other wait or producing inconsistent results. For this storage engine,avoid using the LOCK TABLES statement,because it does not offer any extra protection,but instead reduces concurrency. The automatic row-level locking makes these tables suitable for your busiest databases with your most important data,while also simplifying application logic since you do not need to lock and unlock tables. Consequently,the InnoDB storage engine is the default in MySQL.

MySQL uses table locking (instead of page,row,or column locking) for all storage engines except InnoDB. The locking operations themselves do not have much overhead. But because only one session can write to a table at any one time,for best performance with these other storage engines,use them primarily for tables that are queried often and rarely inserted into or updated.

 

 

----个人学习总结笔记,可能比较粗糙,观者见谅。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


在正式开始之前,我们先来看下 MySQL 服务器的配置和版本号信息,如下图所示: “兵马未动粮草先行”,看完了相关的配置之后,我们先来创建一张测试表和一些测试数据。 -- 如果存在 person 表先删除 DROP TABLE IF EXISTS person; -- 创建 person 表,其中
> [合辑地址:MySQL全面瓦解](https://www.cnblogs.com/wzh2010/category/1859594.html "合辑地址:MySQL全面瓦解") # 1 为什么需要数据库备份 - 灾难恢复:当发生数据灾难的时候,需要对损坏的数据进行恢复和
物理服务机的CPU、内存、存储设备、连接数等资源有限,某个时段大量连接同时执行操作,会导致数据库在处理上遇到性能瓶颈。为了解决这个问题,行业先驱门充分发扬了分而治之的思想,对大库表进行分割,
然后实施更好的控制和管理,同时使用多台机器的CPU、内存、存储,提供更好的性能。而分治有两种实现方式:垂直拆
1 回顾 上一节我们详细讲解了如何对数据库进行分区操作,包括了 垂直拆分(Scale Up 纵向扩展)和 水平拆分(Scale Out 横向扩展) ,同时简要整理了水平分区的几种策略,现在来回顾一下。 2 水平分区的5种策略 2.1 Hash(哈希) 这种策略是通过对表的一个或多个列的Ha
navicat查看某个表的所有字段的详细信息 navicat设计表只能一次查看一个字段的备注信息,那怎么才能做到一次性查询表的信息呢?SELECT COLUMN_NAME,COLUMN_COMMENT,COLUMN_TYPE,COLUMN_KEY FROM information_schema.CO
文章浏览阅读4.3k次。转载请把头部出处链接和尾部二维码一起转载,本文出自逆流的鱼yuiop:http://blog.csdn.net/hejjunlin/article/details/52768613前言:数据库每天的数据不断增多,自动删除机制总体风险太大,想保留更多历史性的数据供查询,于是从小的hbase换到大的hbase上,势在必行。今天记录下这次数据仓库迁移。看下Agenda:彻底卸载MySQL安装MySQL_linux服务器进行数据迁移
文章浏览阅读488次。恢复步骤概要备份frm、ibd文件如果mysql版本发生变化,安装回原本的mysql版本创建和原本库名一致新库,字符集都要保持一样通过frm获取到原先的表结构,通过的得到的表结构创建一个和原先结构一样的空表。使用“ALTER TABLE DISCARD TABLESPACE;”命令卸载掉表空间将原先的ibd拷贝到mysql的仓库下添加用户权限 “chown . .ibd”,如果是操作和mysql的使用权限一致可以跳过通过“ALTER TABLE IMPORT TABLESPACE;”命令恢_alter table discard tablespace
文章浏览阅读225次。当MySQL单表记录数过大时,增删改查性能都会急剧下降,可以参考以下步骤来优化:单表优化除非单表数据未来会一直不断上涨,否则不要一开始就考虑拆分,拆分会带来逻辑、部署、运维的各种复杂度,一般以整型值为主的表在千万级以下,字符串为主的表在五百万以下是没有太大问题的。而事实上很多时候MySQL单表的性能依然有不少优化空间,甚至能正常支撑千万级以上的数据量:字段尽量使用TINYINT、SMALLINT、MEDIUM_INT作为整数类型而非INT,如果非负则加上UNSIGNEDVARCHAR的长度只分配_开发项目 浏览记录表 过大怎么办
文章浏览阅读1.5k次。Mysql创建、删除用户MySql中添加用户,新建数据库,用户授权,删除用户,修改密码(注意每行后边都跟个;表示一个命令语句结束):1.新建用户登录MYSQL:@>mysql -u root -p@>密码创建用户:mysql> insert into mysql.user(Host,User,Password) values("localhost_删除mysql用户组
MySQL是一种开源的关系型数据库管理系统,被广泛应用于各类应用程序的开发中。对于MySQL中的字段,我们需要进行数据类型以及默认值的设置,这对于数据的存储和使用至关重要。其中,有一个非常重要的概念就是MySQL字段默认字符串。 CREATE TABLE `my_...
MySQL是一个流行的开源关系型数据库管理系统,广泛应用于Web应用程序开发、数据存储和管理。在使用MySQL时,正确设置字符集非常重要,以确保数据的正确性和可靠性。 在MySQL中,字符集表示为一系列字符和字母的集合。MySQL支持多种字符集,包括ASCII、UTF...
MySQL存储函数 n以内偶数 MySQL存储函数能够帮助用户简化操作,提高效率,常常被用于计算和处理数据。下面我们就来了解一下如何使用MySQL存储函数计算n以内的偶数。 定义存储函数 首先,我们需要定义一个MySQL存储函数,以计算n以内的偶数。下...
MySQL是一个流行的关系型数据库管理系统,基于客户机-服务器模式,可在各种操作系统上运行。 MySQL支持多种字符集,不同的字符集包括不同的字符,如字母、数字、符号等,并提供不同的排序规则,以满足不同语言环境的需求。 //查看MySQL支持的字符集与校对规...
在MySQL数据库中,我们有时需要对特定的字符串进行截取并进行分组统计。这种操作对于数据分析和报表制作有着重要的应用。下面我们将讲解一些基本的字符串截取和分组统计的方法。 首先,我们可以使用substring函数对字段中的字符串进行截取。假设我们有一张表stude...
MySQL提供了多种字符串的查找函数。下面我们就一一介绍。 1. LIKE函数 SELECT * FROM mytable WHERE mycolumn LIKE 'apple%'; 其中"apple%"表示以apple开头的字符串,%表示任意多个字符...
MySQL 是一种关系型数据库管理系统,广泛应用于各种不同规模和类型的应用程序中。在 MySQL 中,处理字符串数据是很常见的任务。有时候,我们需要在字符串的开头添加一定数量的 0 ,以达到一定的位数。比如,我们可能需要将一个数字转换为 4 位或 5 位的字符串,不足的...
MySQL是一种流行的关系型数据库管理系统,支持多种数据类型。以下是MySQL所支持的数据类型: 1. 数值型数据类型: - TINYINT 保存-128到127范围内的整数 - SMALLINT 保存-32768到32767范围内的整数 - MEDIU...
MySQL中存储Emoji表情字段类型 在现代互联网生态中,表情符号已经成为人们展示情感和思想的重要方式之一,因此将表情符号存储到数据库中是一个经常出现的问题。MySQL作为最流行的开源关系型数据库管理系统之一,也需要能够存储和管理这些表情符号的字段类型。 UT...
MySQL是一种关系型数据库管理系统。在MySQL数据库中,有多种不同的数据类型。而其中,最常见的数据类型之一就是字符串类型。在MySQL中,字符串类型的数据通常会被存储为TEXT或VARCHAR类型。 首先,让我们来看一下VARCHAR类型。VARCHAR是My...
MySQL字符串取整知识详解 MySQL是一种开源的关系型数据库管理系统,广泛应用于各个领域。在使用MySQL过程当中,我们经常需要对数据进行取整操作。本文将介绍如何使用MySQL字符串取整来处理数据取整问题。 什么是MySQL字符串取整? MySQL...