MySQL分布式事务
一、分布式事务 在说分布式事务（XA）之前，可以先看一下“以交易系统为例，看分布式事务架构的五大演进”，阐述了分布式事务解决了什么问题？ InnoDB存储引擎提供了对XA事务的支持，并通过XA事务来支持分布式事务的实现。分布式事务指的是允许多个独立的事务资源参与到一个全局的事务中。事务资源通常是关系型数据库系统，但也可以是其他类型的资源。全局事务要求在其中的……
以交易系统为例，看分布式事务架构的五大演进
一、概述 在支付、交易、订单等强一致性系统中，我们需要使用分布式事务来保证各个数据库或各个系统之间的数据一致性。举个简单的例子来描述一下这里数据一致性的含义。 程序员小张向女友小丽转账100人民币，转账过程是：先扣除小张100元，再为小丽的账户添加100元。 如果在转帐过程中，扣款操作和打款操作要么同时执行，要么同时都不执行，我们就认为转帐过……
MySQL InnoDB特性：两次写（DoubleWrite）
一、经典Partial page write问题？ 介绍doublewrite之前我们有必要了解partial page write（部分页失效）问题。 InnoDB中有记录（Row）被更新时，先将其在Buffer Pool中的page更新，并将这次更新记录到Redo Log file中，这时候Buffer Pool中的该page就是被标记为Dirty。在适……
MySQL InnoDB Online DDL
一、概述 MySQL DBA 应该都知道，数据库操作里面，DDL 操作（比如 ALTER 等）代价是非常高的，特别是在单表上千万的情况下，加个索引或改个列类型，就有可能堵塞整个表的读写。一个是有些 DDL 操作本身有锁，一个是 MDL 锁。但 DDL 又是一个不可避免的需求，无论是业务迭代，还是整理表碎片都需要。 我们知道如果要收缩一个表，只是 delete……
MongoDB CPU利用率很高，怎么破？
经常有用户咨询：MongoDB CPU 利用率很高，都快跑满了，应该怎么办？ 遇到这个问题，99.9999% 的可能性是「用户使用上不合理导致」，本文主要介绍从应用的角度如何排查 MongoDB CPU 利用率高的问题。 Step1: 分析数据库正在执行的请求 用户可以通过 Mongo Shell 连接，并执行 db.currentOp() 命令，能看到数……
SQL优化工具SQLAdvisor使用
一、简介 在数据库运维过程中，优化SQL是业务团队与DBA团队的日常任务。例行SQL优化，不仅可以提升程序性能，还能够降低线上故障的概率。 目前常用的SQL优化方式包括但不限于：业务层优化、SQL逻辑优化、索引优化等。其中索引优化通常通过调整索引或新增索引从而达到SQL优化的目的。索引优化往往可以在短时间内产生非常巨大的效果。如果能够将索引优化转化成工具化、……
MongoDB副本集write concern为majority的坑
故障现象 一个副本集下四个节点，一个primary，两个Secondary，一个arbiter，其中将一个Secondary关闭后，修改primary节点的密码，这时修改命令会卡住直到超时失败。 udb-aqmp5a:PRIMARY> db.changeUserPassword("root","123123") 2016……
Redis内存和key为什么不易过大？
近几年来，随着Redis的发展壮大，被越来越多的人所熟知，越来越多的企业也使用了Redis。首先说一下为什么Key不易过大，然后来分享下Redis单实例内存过大遇到的问题以及解决方案。 为什么Key不易过大？ 由于Redis是单进程工作只能使用单核CPU，所以在Redis中不易单key过大，这个单key指的是string类型的。我曾经碰到过单key大小为5G……
MySQL 5.7默认SQL模式带来的问题总结
在使用MySQL 5.7版本时，已经碰到了两起因为SQL_MODE的改变而导致的问题了，究其原因都是因为MySQL 5.7控制的更加严格了，所以在MySQL 5.6或MySQL 5.5有些SQL语句就无法在MySQL 5.7执行了（会给开发带来一个很诡异的问题，就是代码一样、环境一样、SQL一样、测试跟正式怎么就报错呢？）。 说一下我碰到的两起事件： 某些……
MySQL如何定位未提交事务执行的SQL语句?
一、问题描述 我们经常会碰到这样的情况，某个事务执行完了未提交，后续再来一个DDL和DML操作，导致后面的session要么处于waiting for metadata lock，要么是锁等待超时。这时我们往往只能找到这个未提交的事务的事务id和session id，但是一般都处于sleep状态，不好分析事务内容到底是什么，所以通常都是粗鲁地kill这个se……
MySQL时区问题知晓
关于时区的概念，其实初中地理课已经涉及，很多人都多少了解一些，可能只是细节搞不太清楚。为什么会将地球分为不同时区呢？因为地球总是自西向东自转，东边总比西边先看到太阳，东边的时间也总比西边的早。东边时刻与西边时刻的差值不仅要以时计，而且还要以分和秒来计算。整个地球分为二十四时区，每个时区都有自己的本地时间。在国际无线电通信场合，为了统一起见，使用一个统一的时间……
MySQL索引最左前缀原理与优化
一、示例数据库 为了讨论索引策略，需要一个数据量不算小的数据库作为示例。本文选用MySQL官方文档中提供的示例数据库之一：employees。这个数据库关系复杂度适中，且数据量较大。下图是这个数据库的E-R关系图（引用自MySQL官方手册）： MySQL官方文档中关于此数据库的页面为https://dev.mysql.com/doc/employee/en……