使用FriendFeed来提升MySQL性能的方法

2016年07月27日 7 阅读

背景我们使用MySQL存储了FriendFeed的所有数据。数据库随着用户基数的增长而增长了很多。现在已经存储了超过2.5亿条记录与一堆涵盖了从评论和“喜欢”到好友列表的其他数据。随着数据的增长，我们也曾迭代地解决了随着如此迅猛的增长而带来的扩展性问题。我们的尝试很有代表性，例如使用只读mysql从节点和memcache来增加读取吞吐量，对数据库进行分片来提高写入吞吐量。然而，随着业务的增长，添加新功能比扩展既有功能以迎合更多的流量变得更加困难。特别的，对...

浅谈InnoDB隔离模式的使用对MySQL性能造成的影响

2016年07月27日 8 阅读

在这篇文章里我将讨论一个相关的主题 – InnoDB 事务隔离模式，还有它们与MVCC（多版本并发控制）的关系，以及它们是如何影响MySQL性能的。MySQL手册提供了一个关于MySQL支持的事务隔离模式的恰当描述 – 在这里我并不会再重复，而是聚焦到对性能的影响上。SERIALIZABLE – 这是最强的隔离模式，本质上打败了在锁管理（设置锁是很昂贵的）的条件下，多版本控制对所有选择进行锁定造成大量的开销，还有你得到的并发。这个模式仅在MySQL应用中非...

MySQL中修改表结构时需要注意的一些地方

2016年07月27日 7 阅读

MySql 在修改表结构的时候可能会中断产品的正常运行影响用户体验，甚至更坏的结果，丢失数据。不是所有的数据库管理员、程序员、系统管理员都非常了解Mysql能避免这种情况。DBA会经常碰到这种生产中断的情况，当升级脚本修改了应用层和数据库层，或者缺乏经验的管理员、开发在不是很了解Mysql内部工作机制的情况下修改了规范文件。真相是：直接修改表结构的过程中会锁表（在5.6版本之前）在线的数据定义语言在5.6版本不总是在线的而且也会锁表就算使用Percona工...

使用cgroups来限制MySQL企业备份服务对资源的占用

2016年07月27日 9 阅读

今天我遇到一个问题，MySQL企业版备份引起I/O子系统负载过大，应用响应缓慢，导致系统不可用。所以我想限制mysqlbackup的进程，使它不会引起更多的问题。mysqlbackup命令里面有读，写和进程数的设置。默认是1个读，1个写和5个线程。因为我用的是默认设置，所以还是没有必要去调整了。使用ionice工具没法工作，因为它需要CFG I/O调度器。我在这篇文章里找到一个方法。 它使用的是linux的cgroups。之前，在三台中有一台服务器使用的是...

详细讲解安全升级MySQL的方法

2016年07月27日 7 阅读

MySQL升级是非常必要的. 我们在Percona Support上列出了关于MySQL升级最佳实践的各种问题.这篇文章推荐了一些不同情况下升级MySQL的方法.为什么MySQL升级是必须的? 原因有很多,比如：为了使用新增的特性,基于性能方面的考量, 修复的bug. 但是在没有充分的测试以前就应用到你的应用中是非常危险的, 因为升级可以能会让你的应用不能正常运作- 也可能引起性能的问题. 此外, 我建议你关注MySQL的发布信息和Percona ...

大幅提升MySQL中InnoDB的全表扫描速度的方法

2016年07月27日 7 阅读

在 InnoDB中更加快速的全表扫描一般来讲,大多数应用查询的时候都会用索引，查找很少的几行数据（主键查找或百行内的查询），但有时候我们需要全表查询。典型的全表扫描就是逻辑备份 （mysqldump） 和 online schema changes（ 注：在线上对大表 schema 的操作，也是 facebook 的一个开源项目） （SELECT ... INTO OUTFILE）.在 Facebook我们用 mysqldump 来备份数据库. 正如你所知...

大幅优化MySQL查询性能的奇技淫巧

2016年07月27日 7 阅读

回顾 MySQL / InnoDB 的改善历史。你能很容易发现。在MySQL 5.6稳定版本中从来没有在read-only 这么快的提速，它很容易搞懂，以及在read-only（RO）有着良好的扩张性。也很期待它在read+write（RW）上达到一个较高水平。（特别是在读取数据是数据库主要工作的时候）然而。我们对于RO在 MySQL 5.6的表现也十分的高兴,在5.7这个版本中，主要工作集中在 read+write （RW）上, 因为在大数据的处理上还没...

12个优化MySQL的技巧小整理

2016年07月27日 7 阅读

避免编辑转储文件Mysqldump创建的转储文件原本是无害的，但它很容易被尝试去编辑。然而，人们应该知道在任何情况下的试图修改这些文件被证明是有危险的。直观地看对这些文件的改动会导致数据库损坏，从而导致系统的退化。为了让你的系统免受任何麻烦，你必须避免编辑MySQL转储文件。MyISAM 块大小大多数开发者忘记了这一事实，文件系统往往需要一个大的MyISAM块以保证高效运行。许多开发者不知道块大小的设置。.MYI文件存储在myisam_block_size...

MySQL结合使用数据库分析工具SchemaSpy的方法

2016年07月27日 8 阅读

近来，我和一帮老客户一起工作，他们让花时间给他们说一下在他们新环境中使用的新工具。其中，我发现的一个非常有用的工具是SchemaSpy。SchemaSpy是Java开发的的工具（要求java 5或更高版本的支持），主要用来分析数据库中数据模型的元数据，并且能生成基于浏览器可视化的显示。通过点击就可了解数据表的层次结构，父子表关系等，主要通过HTML 链接或者实体关系图来表达。它也被设计成用来帮助解决由于约束而导致的数据库关联失败的迟钝错误。我所喜欢ERD工...

在VB.NET应用中使用MySQL的方法

2016年07月27日 8 阅读

绪言在Visual Studio中使用向导连接到MySQL数据库是一件相当棘手的事情。因为MySQL并不在VS2012默认支持的数据库中（比如SQL Server）。在本文中我将介绍如何使用VB.NET连接到MySQL数据库并且执行SQL语句（SELECT，UPDATE，DELETE），同时我会展示如何将MySQL连接器导入（connectors）到Visual Studio 2012中。使用代码 你须要从http://dev.mysql.com/down...

在MySQL中创建带有IN和OUT参数的存储过程的方法

2016年07月27日 8 阅读

在 MySQL 中创建储存过程的语法很难记，除非你经常跟储存过程打交道，原因很简单，语法不是什么小笑话。如果你通过命令行控制 MySQL，你需要记住准确的语法。一个快速示例可以很好的帮助你做到这点。在MySQL 入门教程中，我们能够看到很多关于如何创建储存过程 和如何利用 IN 和 OUT 参数调用存储过程的示例。这些示例都很简单，能够很好的帮助你理解 MySQL 中创建带参数存储过程的语法。这些示例已在 MySQL 5.5 中通过测试。我们将用下面的雇员...

创建一个实现Disqus评论模版的MySQL模型

2016年07月27日 9 阅读

在很长一段时间内，PostgreSQL都被认为是MySQL的替代品。但是，在那段时间里，根本没有办法使他达到MySQL所能达到的水平。最近几年里，这些问题都无法解决，并且产生了许多有趣的工具来弥补PG。我们在Disqus中使用了两个Slony和pgbouncer。Slony让我们可以复制数据（有时候也可以分区），而pgbouncer为我们解决了保持链接和连接池的问题。另外，让我们看看他们的语言：我这个星期很高兴能够学会如何在PGSQL8.4中使用递归查询，...

Win7、WinXP下MySql安装出错完全卸载的方法步骤

2016年07月27日 9 阅读

最近mysql安装出现问题：1.操作系统不同，安装过程中删除，清理也不同：window 7： 安装mysql过程中，最后安装到start service的时候提示服务有问题，然后卸载，卸载后按照还是同样的错误，下面就说卸载过程如何全面卸载干净：1）找到mysql安装路径，目前默认c盘，然后找到组织菜单----文件夹和搜索选项-----查看tab中，有个显示隐藏的文件，文件夹和驱动器，勾选后，然后再c盘下面有个programdata文件夹，删除此文件夹下面的...

在MySQL中使用Sphinx实现多线程搜索的方法

2016年07月27日 7 阅读

MySQL、Sphinx及许多数据库和搜索引擎中的查询是单线程的。比如说，在一台32个CPU核心、16个磁盘的R910服务器上执行一个查询，它最多只会用到一个核心和一个磁盘。没错，只会使用一个。如果查询是CPU密集型作业，那么会使用大约3%的整机CPU能力（以上述32核机器为例）。如果是磁盘密集型，则大约会使用6%的整机IO能力（也是与上例同样的配置，16个磁盘组成RAID10或RAID0）。我再换个说法吧。如果你在一台单核单磁盘的机器上执行了某个查询，花...

MySQL中给自定义的字段查询结果添加排名的方法

2016年07月27日 10 阅读

我正在用 MySQL 客户端的时候，突然想到如果可以给查询结果添加排名该多好啊，然后就找到了一个简单的解决办法。下面是一个示例表的数据： 然后我们要根据 Roll_No 字段进行排序并给出排名，我们首先必须定义一个初始值为0的变量，然后在查询结果中使用这个变量。如下面的代码：SET @counter=0; SELECT @counter:=@counter+1 AS Rank,LastName,Roll_no as Roll FROM Students O...

MySQL中三种关联查询方式的简单比较

2016年07月27日 13 阅读

看看下面三个关联查询的 SQL 语句有何区别？SELECT * FROM film JOIN film_actor ON （film.film_id = film_actor.film_id）SELECT * FROM film JOIN film_actor USING （film_id）SELECT * FROM film, film_actor WHERE film.film_id = film_actor.film_id最大的不同更多是语法糖，但有...

深入理解MySQL中的事务机制

2016年07月27日 7 阅读

使用数据库事务可以确保除事务性单元内的所有操作都成功完成。MySQL中的InnoDB引擎的表才支持transaction。在一个事务里，如果出现一个数据库操作失败了，事务内的所有操作将被回滚，数据库将会回到事务前的初始状态。有一些不能被回滚的语句：将在本文的最后讨论。在一个web应用中，会很经常遇到需要使用事务的地方，要么希望若干语句都执行成功，要么都不执行，如果出现有些执行成功，而其他的失败将会导致数据损坏。在这篇文章的例子中，我们使用下面的两张表"em...

MySQL在Linux系统中隐藏命令行中的密码的方法

2016年07月27日 8 阅读

在命令行中输入命令并不是一个好主意，会造成安全问题。但是如果你决定去写一个应用，而这个应用需要在命令行中使用密码或者其他敏感信息。那么，你能通过以下方法禁止系统的其他用户轻易的看到这些敏感数据 呢？，类似MySQL在ps命令下隐藏密码。假设我这里系统里两个用户，一个是root ，一个是dabu 。测试系统为centos 6.5在按照下面的步骤做：[root@dabu.info ~]#su dabu #切换到dabu这个账号[dabu@dabu.info ~...

在Linux系统的命令行中为MySQL创建用户的方法

2016年07月27日 9 阅读

要访问一个MySQL服务器，你需要使用一个用户帐号登录其中方可进行。每个MySQL用户帐号都有许多与之相关连的属性，例如用户名、密码以及权限和资源限制。"权限"定义了特定用户能够在MySQL服务器中做什么，而"资源限制"为用户设置了一系列服务器资源的使用许可。创建或更新一个用户涉及到了对用户帐号所有属性的管理。下面展示了如何在Linux中创建和设置一个MySQL用户。首先以root身份登录到MySQL服务器中。$ mysql -u root -p当验证提示...

在Ubuntu或Debian系统的服务器上卸载MySQL的方法

2016年07月27日 7 阅读

对于有的vps，系统默认安装了mysql。我们需要从我们的服务器、vps上卸载（移除）默认的mysql。那么如何（怎样）在ubuntuDebian上卸载mysql?通常情况下，下列mysql软件包会被安装到 Debian 、Ubuntu中：mysql-client - The latest version of MySQL database client（最新版的mysql数据库客户端）.mysql-server - The latest vers...