DB2内存使用过高优化

2017年02月05日 15 阅读

最近在在做DB2的benchmark，发现数据库的内存占用特别高，因为是做benchmark测试，所以表并不多，并且主要是针对其中的一张表做测试，当这张表的数据快到1亿的时候，用top查询系统状态如下# toptop - 20:06:34 up 5 days, 22:20, 12 users, load average: 18.53, 6.57, 3.19...PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ CO...

DB2查看执行计划

2017年02月05日 15 阅读

在DB2中查看sql的执行计划没有其它数据库方便，需要经过好几步，这里我把步骤整理成shell脚本以方便使用，如下：#！/bin/shdb2 connect to <db>db2 -tvf $HOME/sqllib/misc/EXPLAIN.DDLdb2 set current explain mode explaindb2 "<sql>"db2 set current explain mode nodb2exfmt -d <...

Oracle 关于number类型转换to_char类型 存在的问题

2017年02月05日 15 阅读

Oracle 关于number类型转换to_char类型 存在的问题select to_char（0.1） nums from dual;观察发现如果小数的整数位是0， 转换字符串之后没有了前面的0，如果需要前面的0，则需要一定的规则进行格式化，示例如下select to_char（0.1,"0.9"） nums from dual;我们把小数换成整数后再看select to_char（1,"0.9"） nums from dual;整数也会编程doubl...

Python 生产环境MySQL数据库增量备份脚本

2017年02月05日 16 阅读

MySQL数据库常用的办法是通过MySQLdump导出sql进行备份，但是不适合数据量很大的数据库，速度，锁表是两个严重的问题。前面写了一遍文章介绍xtrabackup的热备工具，见 http://www.linuxidc.com/Linux/2015-02/113058.htm。下面的脚本是基于xtrabackup实现自动备份数据库的功能。需求描述：每天晚上23点，对数据库进行一次完整备份。第二天0-22点，每小时进行一次增量备份。每次备份前把上次的完整...

生产环境MySQL快速备份工具XtraBackup使用案例

2017年02月05日 19 阅读

MySQL的备份有很多种方式，最常用的应该是MySQLdump了，将数据库导出一个 sql文件，还原的时候source db.sql 就欢快的执行了。小伙伴愉快的布上一个shell脚本，配上cron，幸福的看着每天备份文件的生成，倍感安全。假如一个MySQL超过了10G呢？ 请相信我，导出的时间需要好几个小时，那还原呢，时间会更长。我曾经用sql还原一个6G的数据库，用了3个多小时。MySQLdump这种逻辑备份的缺点就不多说了，说说xtrabackup，...

Oracle使用游标为所有用户表创建主键语句

2017年02月05日 14 阅读

应用场合：数据表新增自增一主键能加快数据表的访问速度，而且是整形的索引速度最快。本程序适合在导入Oracle数据库时删除不存在主键的情况下运行。代码说明：所有的表主键字段名都设置为ID,如果已存在ID字段，则判断是否是整形，如果不是就重命名字段为[表名ID]，然后新增ID，如果不存在则直接添加自增一ID的主键操作说明：打开PQSQL连接数据库后直接执行下面的详细脚本代码运行即可，脚本有风险（会删除原来的索引跟主键约束），请不要轻易在正式运行的数据库上直接执...

Redis的持久化--RDB的工作原理及引发的问题

2017年02月05日 15 阅读

Redis持久化RDB模式的工作原理：Redis持久化RDB模式，Redis借助了fork命令的copy on write机制。在生成快照时，将当前进程整个复制出来，fork出一个子进程，然后在子进程中循环所有的数据，将数据写成为RDB文件。Redis持久化RDB模式引发的问题：RDB模式需要Redis服务所占内存的1倍的内存例如一台机器总共16G内存，用了10G内存做Redis服务，假如这10G内存都占满了这时运行save命令，这时会把10G的进程再复制...

Oracle分段查询

2017年02月05日 14 阅读

网上Oracle查看分段查询的例子，用的最多的是LAG和LEAD统计函数，Lag和Lead函数可以在一次查询中取出同一字段的前N行的数据和后N行的值。这种操作可以使用对相同表的表连接来实现，不过使用LAG和LEAD有更高的效率。例如：create table TEST（ GRADE NUMBER not null, STUID VARCHAR2（4））;insert into test （GRADE, STUID）values （1, "1001"）;in...

Spring MVC 链接 PostgreSQL

2017年02月05日 16 阅读

前面一篇文章已经分享了搭建Spring MVC：http://www.linuxidc.com/Linux/2015-02/113103.htm这一篇来链接数据库PostgreSQL1、在pom.xml添加几个依赖 <dependency> <groupId>org.postgresql</groupId> <artifactId>postgresql</artifactId&...

MongoDB 存储过程的使用以及性能调优方案

2017年02月05日 15 阅读

虽然MongoDB给了我们很多驱动可以用，但是都没有mongodb的shell来的方便。就比如说最近需要做的DBRef嵌套类型的数据要做CRUD如果使用mog驱动的话会非常麻烦。因此我们这里来做个试验，首先给test数据库添加初始化数据添加Server-side script以及测试mongo 添加数据db.people.insert（{"_id":"test","phone","233333"}） //输入原始数据// 数据库修改函数// update之...

RedHat+Oracle安装过程中碰到的一些值得总结的问题

2017年02月05日 14 阅读

昨天大半夜装一个RedHat Linux 5+Oracle版本，期间碰到了几件事情，陈述如下，以此为据。1. 安装前需要配置内核参数，可参考Oracle官方文档推荐的最低值来设置，但往往机器自身有些参数值已有了，例如kernel.shmmax、kernel.shmall，也参考过网上不少帖子，设置的值有所差别，此时官方文档中的一句话值得我们注意：“Note: If the current value of any parameter is hi...

ORA-00130: invalid listener address错误解决

2017年02月05日 16 阅读

登录Oracle数据库，提示：ora11g>sqlplus dcsopen/dcsopen1SQL*Plus: Release 11.2.0.1.0 Production on Mon Jan 5 18:49:31 2015Copyright （c） 1982, 2009, Oracle. All rights reserved.ERROR:ORA-01034: ORACLE not availableORA-27101: shared memory...

关于Oracle的内存问题

2017年02月05日 19 阅读

Oracle中内存结构主要包括两大类分别是SGA和PGA，其中SGA代表的是系统全局区，PGA代表程序全局区。Oracle内存主要存储的有执行程序代码（PL/SQL，JAVA）；关于已经连接的会话的信息，包括当前所有活动和非活动会话；程序运行时必须的相关信息；例如查询计划；Oracle进程之间共享的信息和相互交流的信息，例如锁；程序运行期间所需要的数据以及存储在外存储上的缓冲信息等。内存是数据库体系结构中非常重要的一部分，也是影响数据库性能的主要因素之一。...

手把手教你用Docker部署一个MongoDB集群

2017年02月05日 15 阅读

【编者的话】MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中最像关系数据库的。支持类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。本文介绍了如何使用Docker搭建MongoDB集群。本文我会向大家介绍如何使用Docker部署一个MongoDB集群，具体如下：2.6.5版本的MongoDB有3个节点的副本集（Replica set）身份验证持久化数据到本地文件系统首先要准备...

Drop goldengate用户时报ORA-00604 ORA-20782 ORA-06512问题解决

2017年02月05日 14 阅读

1、问题现象SQL> drop user goldengate cascade; Drop goldengate用户时，报ORA-00604 ORA-20782 ORA-06512错误，具体报错内容如下：drop user goldengate cascade*ERROR at line 1:ORA-00604: error occurred at recursive SQL level 2ORA-20782: Oracle GoldenGate D...

terminating the instance due to error 481导致ASM无法启动故障解决

2017年02月05日 15 阅读

1、现象描述一个RAC数据库，意外DOWN机后，第一个节点正常启动，但是第二个节点却无法启动ASM和CRS资源。2、分析原因由于ASM磁盘组无法启动，查看ASM日志发现如下信息：MMNL started with pid=21,OS id=14028lmon registered with NM -instance number 2 （internal mem no 1）Tue Nov 18 14:48:50 2014PMON （ospid:13986）:...

Local prefixed index和Local nonprefixed index对select语句的性能影响分析

2017年02月05日 15 阅读

1、搞清楚两种索引的概念在比较两种索引对select产生的影响之前，先要搞清楚，什么是Local prefixed index，什么叫Local nonprefixed index。其实，这两种索引，都是属于分区local索引，所以，这两种类型的索引，只有可能在分区表上才会出现。1.1 什么是Local prefixed index是指索引中的列，就是分区表的分区键列，或者是索引中的列，包含表的分区键值列，并且为前置位置在索引最前部位置的本地分区索引。例如...

OGG的extract进程checkpoint时间点回到1988-01-01 00:00:00故障处理

2017年02月05日 16 阅读

1、故障现象 Extract进程（SEXTR01）状态为running，但是Lag at Chkpt却达到5个多小时，且时间一直在增长，根本就不抽取新日志，状态信息如下：GGSCI （caXXadgdb） 21> info allProgram Status Group Lag at Chkpt Time Since ChkptMANAGER RUNNING EXTRACT RUNNING DPEYWGL...

Oracle数据库的基本操作语句

2017年02月05日 15 阅读

本文主要介绍了Oracle数据库基本的管理数据库的语句及其概念1.如何查询一个角色包括的权限？a.一个角色包含的系统权限select * from dba_sys_privs where grantee="CONNECT"或select * from role_sys_privs where role="CONNECT"b.一个角色包含的对象权限select * from dba_tab_privs where grantee="CONNECT"或sele...

Oracle游标介绍

2017年02月05日 14 阅读

Oracle的游标介绍Oracle中的PL/SQL的游标是指把数据库中查询出来的数据以临时表的形式存放在内存中，游标可以对存储在内存中的数据进行操作，返回一条或者一组数据，或者一条数据也不返回。PL/SQL中的记录和表类型虽然也能用来存储数据，但对一组存储在内存中的数据进行操作，还是不太方便，游标恰好是这方面的工具。PL/SQL包含隐含游标和显示游标，其中隐含游标用于处理SELECT INTO和DML语句，而显示游标则专门用于处理SELECT语句返回的多行...