MySQL 物理备份死锁分析

2017年02月05日 12 阅读

背景本文对 5.6 主备场景下，在备库做物理备份遇到死锁的case进行分析，希望对大家有所帮助。这里用的的物理备份工具是 Percona-XtraBackup（PXB），有的同学可能不清楚其备份流程，所以这里先简单说下，PXB的备份步骤是这样的： 1. 拷贝 InnoDB redo log，这是一个单独的线程在拷，直到备份结束； 2. 拷贝所有InnoDB ibd文件； 3. 加全局读锁，执行 FLUSH TABLES WITH READ LOCK（FTW...

Ubuntu 16.04.1 安装MyCat

2017年02月05日 13 阅读

Mycat是一个开源的分布式数据库系统，但是由于真正的数据库需要存储引擎，而Mycat并没有存储引擎，所以并不是完全意义的分布式数据库系统。安装Java环境，配置全局环境变量MyCAT是使用JAVA语言进行编写开发，使用前需要先安装JAVA运行环境（JRE）,由于MyCAT中使用了JDK7中的一些特性，所以要求必须在JDK7以上的版本上运行。安装JDK,本文安装版本为jdk-8u101-linux-x64.tar.gz可以从官网http://www.ora...

CenterOS中安装Redis及开机启动设置

2017年02月05日 13 阅读

CenterOS中安装Redis及开机启动设置Redis安装从官方下载最新Redis进行安装，官网地址：http://redis.io/download$ wget http://download.redis.io/releases/redis-3.2.3.tar.gz$ tar xzf redis-3.2.3.tar.gz$ cd redis-3.2.3$ make$ make installRedis启动RedisServer /path/to/red...

关于 MySQL二进制日志

2017年02月05日 13 阅读

查看MySQL二进制文件中的内容有两种方式1. mysqlbinlog2. SHOW BINLOG EVENTS [IN "log_name"] [FROM pos] [LIMIT [offset,] row_count]下面来测试一下，在mysql中执行如下操作mysql> flush logs;Query OK, 0 rows affected （0.01 sec）mysql> insert into test.t1 values（1,"a...

MySQL升级 参考分享

2017年02月05日 13 阅读

MySQL的升级相对来说还是比较简单的。它支持两种方式的升级：原地升级（In-place Upgrade）关闭数据库，替换旧的二进制文件，重启数据库，执行mysql_upgrade逻辑升级（Logical Upgrade）用mysqldump导出数据，安装新的数据库版本，将数据导入到新的数据库中，执行mysql_upgrade但是MySQL版本众多，不仅有各种大版本，譬如5.1,5.5,5.6,5.7,同一个大版本中也会有各种小版本。那么官方支持怎么的升级...

浅析MySQL复制

2017年02月05日 12 阅读

MySQL的复制是基于binlog来实现的。流程如下涉及到三个线程，主库的DUMP线程，从库的IO线程和SQL线程。1. 主库将所有操作都记录到binlog中。当复制开启时，主库的DUMP线程根据从库IO线程的请求将binlog中的内容发送到从库。2. 从库的IO线程接受到主库DUMP线程发送的binlog事件后，将其写到本地的relay-log。3. 从库的SQL线程重放relay-log中的事件。实际上，在MySQL 4.0之前，复制只有两个线程，ma...

MySQL关于exists的一个bug

2017年02月05日 13 阅读

今天碰到一个很奇怪的问题，关于exists的，第一个语句如下：SELECTcount（1）FROMAPPLY tWHEREEXISTS （SELECTr.APPLY_IDFROMRECORD rWHEREt.APPLY_ID = r.APPLY_ID）;产生的结果是：89584第二个语句如下：SELECTcount（1）FROMAPPLY tWHEREEXISTS （SELECTmax（r.FINISH_TIME）FROMRECORD rWHEREt.AP...

TokuDB存储引擎浅析

2017年02月05日 12 阅读

TokuDB是Tokutek公司开发的基于ft-index（Fractal Tree Index）键值对的存储引擎。它使用索引加快查询速度，具有高扩展性，并支持hot scheme modification，具有以下特点：1. 插入性能快20~80倍；2. 压缩数据减少存储空间；3. 数据量可以扩展到几个TB；4. 不会产生索引碎片；5. 支持hot column addition，hot indexing，mvcc适用场景：1. 如果你要存储blob，不...

MySQL中RESET SLAVE和RESET MASTER的区别

2017年02月05日 13 阅读

RESET SLAVE的语法如下：RESET SLAVE [ALL] [channel_option]channel_option: FOR CHANNEL channel其中，channel_option主要是针对5.7.6引入的多源复制。RESET SLAVE官方的解释如下RESET SLAVE makes the slave forget its replication position in the master"s binary log. Thi...

MySQL实现两张表数据的同步

2017年02月05日 12 阅读

有两张表A和B，要求往A里面插入一条记录的同时要向B里面也插入一条记录，向B里面插入一条记录的同时也向A插入一条记录。两张表的结构不同，需要将其中几个字段对应起来。可以用下面的触发器实现。表A的触发器：beginset @disable=1;if @disable=1 and NOT EXISTS（SELECT 1 FROM tableB where ID=new.ID） then insert into tableB （ID,对应字段1） valu...

Oracle取消用户连续登录失败次数限制

2017年02月05日 13 阅读

当用户连续登录失败次数过多时，Oracle会锁定该用户，“FAILED_LOGIN_ATTEMPTS”用于设置最大次数，超过该值则锁定该帐号。要取消用户连续登录失败次数的限制可以按照以下方法操作：1. 输入以下命令，查看“FAILED_LOGIN_ATTEMPTS”的值：SQL> select * from dba_profiles s where s.profile="DEFAULT" and res...

从MySQL 5.5迁移到MariaDB 10.1.14

2017年02月05日 13 阅读

迁移计划如下： 1.备份MySQL 5.5的数据库，对指定库进行备份。 2.还原到Mariadb，然后建立复制。 3.然后就可以愿意啥时候切换就啥时候切换。遇到的问题： 因为一般都是innodb，所以我想用xtrabackup工具备份。备份后发现还原需要依赖innodb的表空间切换。 1.表空间切换，必须要打开innodb_file_per_table。也就是说所有的表都要有独立的文件。有一些表虽然是innodb但是存在ibdata下面。 幸好...

Ubuntu下安装 MongoDB

2017年02月05日 13 阅读

MongoDB只提供了64位LTS（长期支持）Ubuntu发行版的packages。例如,12.04 LTS,14.04 LTS,16.04 LTS等等。1.导入被包管理系统使用的公钥 Ubuntu软件包管理工具（例如：dpkg和apt）通过要求经销商使用GPG密钥签署包以确保方案的一致性和真实性。通过以下的命令导入mongodb公共GPG密钥。sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com...

浅析MySQL基于ROW格式的二进制日志

2017年02月05日 13 阅读

上文分析的二进制日志实际上是基于STATEMENT格式的，下面我们来看看基于ROW格式的二进制日志，毕竟，两者对应的binlog事件类型也不一样，同时，很多童鞋反映基于ROW格式的二进制日志无法查到原生的DML语句，关于这个问题，其实官方也给出了解决方案，下面，将一一揭晓。关于 MySQL二进制日志 http://www.linuxidc.com/Linux/2016-08/134341.htm首先，来几条测试数据mysql> set binlog_...

MySQL binlog中的事件类型

2017年02月05日 14 阅读

MySQL binlog记录的所有操作实际上都有对应的事件类型的，譬如STATEMENT格式中的DML操作对应的是QUERY_EVENT类型，ROW格式下的DML操作对应的是ROWS_EVENT类型。首先，看看源码中定义的事件类型源码位置：mysql-5.7.14/libbinlogevents/include/binlog_event.henum Log_event_type{/**Every time you update this enum （whe...

Linux 系统中的MySQL数据库默认区分大小写

2017年02月05日 13 阅读

今天在开发中遇到这么个问题，将连接的数据库改为服务器上的时候（服务器是Linux系统的），程序跑起来后一直出错，总提示数据库的表找不到，而打开数据库看该表明明是存在的，在我的印象中MySQL数据是不区分大小写的，后来查资料才发现，在Linux系统中MySQL默认是严格区分大小写的，可以在配置文件中添加配置，用root帐号登录后，在/etc/my.cnf 中的[mysqld]后添加添加lower_case_table_names=1，重启MYSQL服务，这时...

在 CentOS7 上部署 MySQL 主从

2017年02月05日 12 阅读

在 CentOS7 上部署 MySQL 主从1 通过 SecureCRT 连接至 MySQL 主服务器；2 找到 my.cnf 文件所在的目录： mysql --help | grep my.cnf一般情况 my.cnf 都会位于 /etc/ 目录下；3 用 vim 打开 MySQL 的配置文件 my.cnf： vim /etc/my.cnf4 找到 [mysqld] 并在其后添加如下配置： # 唯一标识此 MySQL 服务器，默认值为 1，一般采用...

让 Oracle的自动统计信息不收集直方图的信息

2017年02月05日 16 阅读

如何让Oracle的自动统计信息不收集直方图的信息在Oracle 9i中，默认的统计信息收集是不收集直方图信息的，也就是说默认的MOTHOD_OPT模式为’FOR ALL COLUMNS SIZE 1而在10g开始，dbms_stats包中默认的METHOD_OPT做了调整，默认的METHOD_OPT值为”FOR ALL COLUMNS SIZE AUTO”：SQL> select * from v$version...

Oracle 11g的Redo Log和Archive Log的分析方法

2017年02月05日 13 阅读

自Oracle 11g起，无需设置UTL_FILE_DIR就可以使用LOGMNR对本地数据库的日志进行分析，以下是使用LOGMNR的DICT_FROM_ONLINE_CATALOG分析REDO和归档日志的步骤分析REDO日志的实验创建测试表，并做DML操作。SQL> create table t_test（id number,name varchar2（15））;Table created.SQL> insert into t_test val...

基于XtraBackup 2.3.5的 MySQL全量备份与增量备份

2017年02月05日 13 阅读

基于XtraBackup 2.3.5 的 MySQL全量备份与增量备份，备注：脚步恢复时只能恢复到备份前的状态，如果需要恢复到当前状态，还需配合binlog。#！/bin/sh##################################################### AUTHOR : JusonSummer ## VERSION : V1.0.0 ## DATE : 20...