MongoDB Point in Time Recovery
在生产环境中，尽管我们尽力避免误操作，但是还是会遇到误操作或是其他情况的出现。这时候我们就需要进行Point in time recovery了。Mongodb的point in time recovery是基于oplog进行的，所以请确保oplog的size足够大，也请确保定时有冷备份（或是延时备份）。 理论上只要我们的mongodump做得足够频繁再结合……
MySQL主库 crash-safe 与 binlog 关系？
一、什么是CrashSafe？ CrashSafe指MySQL服务器宕机重启后，能够保证： – 所有已经提交的事务的数据仍然存在。 – 所有没有提交的事务的数据自动回滚。 Innodb通过Redo Log和Undo Log可以保证以上两点。为了保证严格的CrashSafe，必须要在每个事务提交的时候，将Redo Log写入硬件存储。这……
MongoDB&MySQL关于NUMA架构CPU的相关问题
一、背景 MongoDB日志报警显示如下: WARNING: You are running on a NUMA machine. We suggest launching mongod like this to avoid performance problems: numactl --……
MySQL 5.7：客户端和服务端默认开启加密连接
有这么一种需求，就是要求处理敏感字段，比如取出的密码或资金数据用 *** 来表示，那么 DBA 就无法看到这部分的私人数据内容。这本身是一个很不错的安全处理方式，但若 DBA 在本地装一个类似 tcpdump 的工具，则依然能够通过获取得到的包得到想要的数据。因此，除了在程序端进行展示的安全处理，还需在 MySQL 服务器端开启安全的加密通信功能，这时就是 ……
MySQL基于SSL复制的配置过程
MySQL的主从复制默认是明文传送的，如果在生产环境中跨网络传送，数据的安全性就无法完全保证，为了解决这一问题，我们需要一种安全的方式进行传送，即基于SSL加密进行数据传输。在进行SSL加密传输时可能需要先了解CA、证书及SSL相关知识才能更好地明白为何基于SSL的传输就会更加安全。CA、证书及SSL相关知识在本章节不会多加一说明，详情可以看本博客提供的“信……
MySQL 5.7：多源复制实践
一、前言 MySQL 5.7的发布，在复制方面有了很大的改进，比如开始支持多源复制（multi-source）了。以及真正的支持多线程复制了。需要说明一点的是，多源复制可以使用基于二进制日志的复制或者基于事务的复制。下面开始配置基于二进制日志的多源复制。 什么是多源复制？ 首先，我们需要清楚几种常见的复制模式： 1）一主一从 2）一主多从 3）级联复制 4）……
MySQL 5.7：在线开启和关闭基于GTID的复制
一、前言 MySQL在5.6版本之前复制一直是基于二进制日志的复制，到了MySQL5.6时开始支持基于事务（GTIDs）的复制，并且开始支持多线程复制；但MySQL5.6版本的多线程只能基于多库。这就牵扯到了一个应用场景，就是从基于日志的复制在线变更到基于事务的复制，在MySQL5.6版本时这一动作只能重启主服务器才可以做到。但是到了MySQL 5.7版本时……
为什么需要修改MySQL参数ft_min_word_len？
为什么要修改MySQL的ft_min_word_len？ 从MySQL 4.0开始就支持全文索引功能，但是 MySQL 默认的最小索引长度是 4，如下： mysql> show variables like 'ft_min_word_len'; +-----------------+-------+ | Variabl……
MySQL 5.7：无损复制技术
一、复制架构衍生史 在谈这个特性之前，我们先来看看MySQL的复制架构衍生史。 在2000年，MySQL 3.23.15版本引入了Replication。Replication作为一种准实时同步方式，得到广泛应用。这个时候的Replicaton的实现涉及到两个线程，一个在Master，一个在Slave。Slave的I/O和SQL功能是作为一个线程，从Mast……
MySQL设置gtid_purged破坏AUTO_POSITION复制协议
BUG描述 MySQL 5.6.22中有这样一个关于GTID的bugfix，在主备场景下，如果我们在主库上 SET GLOBAL GTID_PURGED = “some_gtid_set”，并且 some_gtid_set 中包含了备库还没复制的事务，这个时候如果备库接上主库的话，预期结果是主库返回错误，IO线程挂掉的，但是实际上，在……
MySQL主从复制过滤规则应用
一、MySQL主从复制过滤 库级过滤 在评估复制选项时，从服务器首先检查是否存在可应用的复制选项replicate-do-db或 replicate-ignore-db。当使用binlog-do-db或 binlog-ignore-db过程相似，但它们属于在主库上检查选项。 主库支持的过滤选项 # 仅将指定库的相关修改操作记……