比较全面的MySQL优化参考（上篇）
admin 11年前（2015-05-30） 4452浏览
本文整理了一些MySQL的通用优化方法，做个简单的总结分享，旨在帮助那些没有专职MySQL DBA的企业做好基本的优化工作，至于具体的SQL优化，大部分通过加适当的索引即可达到效果，更复杂的就需要具体分析了，可以参考本站的一些优化案例或者联系我，下方...
标签：mysql
MySQL复制的概述、安装、故障、技巧、工具
admin 12年前（2015-04-07） 3714浏览
同MongoDB，Redis这样的NoSQL数据库的复制相比，MySQL复制显得相当复杂！ 概述 首先主服务器把数据变化记录到主日志，然后从服务器通过I/O线程读取主服务器上的主日志，并且把它写入到从服务器的中继日志中，接着SQL线程读取中继日志，并...
MySQL 5.6 查询优化器新特性的“BUG”
admin 12年前（2015-03-26） 4174浏览
最近碰到一个慢SQL问题，解决过程有点小曲折，和大家分享下。 SQL本身不复杂，表结构、索引也比较简单，不过个别字段存在于多个索引中。 CREATE TABLE `pre_forum_post` ( `pid` int(10) unsigned NO...
MYSQL的主从复制之旅（2） 关于Binary Log的故事
admin 12年前（2015-03-25） 100浏览
在我的上一篇游记中多次提到一个关键的信息图书馆——Binary Log。很多读者都给我来信询问它的详细介绍。希望通过讲述我认识的binary log，满足大家的好奇心。 我曾经提到过，在准备好迁往slave从库以后，首先需要到master的binar...
MemcachedKeyCharacterError: Control characters not allowed
admin 12年前（2015-03-25） 97浏览
对于想使用 MySQL 实现简单 ID 分配器, 一般就是设置一个整数字段, 然后想分配的时候加 1 并返回. 新手往往犯错误, 先执行一条 update 语句, 然后再 select 那个字段. 但这是错误的! 正确的方式应该是使用 last_in...
MYSQL的主从复制之旅（1） 戏说MySQL Statement-based 主从复制
admin 12年前（2015-03-25） 91浏览
我是一条数据更改操作，来自SQL家族。今天呀，我要来描述一段旅程，通过这段旅程，我才发现原来从主库（master）走到从库（slave）这么的不简单。 今天早上我从主库（master）确定要出发后，首先被要求到一个叫做二进制日志（binary log...
集中日志服务器Rsyslog
admin 12年前（2015-03-25） 120浏览
基于主机的管理一般需要收集服务器的日志信息用于及时发现错误，处理故障。 搭建linux下的集中日志服务器的程序一般可以用syslog,rsyslog,syslog-ng,还有scribe和fluentd等。 基本每一种方式都是服务器端和客户端的模式。...
数据库性能测试方案示例
admin 12年前（2015-03-25） 98浏览
前言 ： 究竟怎样进行数据库性能测试，数据库性能测试需要做些什么？大多数产品线的RD和QA也比较迷茫，经常过来咨询。 一般说来，做数据库性能测试需要如下几个步骤： ：明确测试目的 ：设计测试模型 （即压力模型） ：准备测试集群环境 ：准备压力测试工具...
TIPS:MySQL 改库名操作
admin 12年前（2015-03-25） 83浏览
MySQL在5.1引入了一个rename database操作，但在MySQL5.1.23后又不支持这个命令。可以说是一个实验性的功能，没有在生产中支持过（mysql-5.1 release在mysql-5.1.30）,那么生产中我们有时为了追求完美...
TPCC-MySQL使用手册
admin 12年前（2015-03-24） 112浏览
一、 下载工具包 Tpcc-mysql是percona基于tpcc衍生出来的产品，专用于mysql基准测试，其源码放在bazaar(Bazaar是一个分布式的版本控制系统，采用 GPL 许可协议，可运行于 Windows、GNU/Linux、UNIX...
优化临时表使用，SQL语句性能提升100倍
admin 12年前（2015-03-24） 91浏览
【问题现象】 线上mysql数据库爆出一个慢查询，DBA观察发现，查询时服务器IO飙升，IO占用率达到100%， 执行时间长达7s左右。 SQL语句如下： SELECT DISTINCT g.*, cp.name AS cp_name, c.name...
迁移Zabbix数据库到TokuDB
admin 12年前（2015-03-24） 92浏览
背景介绍 线上的Zabbix数据库有几个大表数据量疯狂增长，单表已经超过500G，而且在早期也没做成分区表，后期维护非常麻烦。比如，想删除过期的历史数据，在原先的模式下，history、history_uint等几个大表是用 (itemid, clo...
mysqldump加-w参数备份
admin 12年前（2015-03-24） 137浏览
我们在用mysqldump备份数据时，有个选项是 –where / -w，可以指定备份条件，这个选项的解释是： -w, --where=name Dump only selected records. Quotes are mandatory 我们可...
监控mysql每个ip的连接数
admin 12年前（2015-03-24） 91浏览
要统计数据库的连接数，我们通常情况下是统计总数，没有细分到每个IP上。现在要监控每个IP的连接数，实现方式如下： mysql >select SUBSTRING_INDEX(host,':',1) as ip , count(*) from i...
基准测试工具之tpcc-mysql
admin 12年前（2015-03-22） 3380浏览
TPC(Tracsaction Processing Performance Council) 事务处理性能协会是一个评价大型 数据库系统软硬件性能的非盈利的组织,TPC-C是TPC协会制定的，用来测试典型的复杂OLTP系统的性能。Tpcc-mysq...
用python为mysql实现restful接口
admin 12年前（2015-03-22） 113浏览
最近在做游戏服务分层的时候，一直想把mysql的访问独立成一个单独的服务DBGate，原因如下: 请求收拢到DBGate，可以使DBGate变为无状态的，方便横向扩展 当请求量或者存储量变大时，mysql需要做分库分表，DBGate可以内部直接处理，...
数据库的最简单实现
admin 12年前（2015-03-17） 80浏览
所有应用软件之中，数据库可能是最复杂的。 MySQL的手册有3000多页，PostgreSQL的手册有2000多页，Oracle的手册更是比它们相加还要厚。 但是，自己写一个最简单的数据库，做起来并不难。Reddit上面有一个帖子，只用了几百个字，就...
Mysql Replication 最简单配置
admin 12年前（2015-03-17） 959浏览
Google 一下Mysql Replication可以找到相关配置说明满地都是，作为双机热备方案很多时候需要用到，但是稍微看下这些资料发现都是乱七八糟的，所以果断去读MySQL 5.1 Reference Manual: 16.1.1. How t...
用 sys.stdout.write 代替 print
admin 12年前（2015-03-17） 81浏览
在上篇多线程mysql客户端 的测试程序中，我使用print输出线程标识和每个线程执行的次数。 但经常会出现多个线程输出到同一行中的情况，导致无法清晰看到每条信息。其中做了两个调整： 先赋值到一个字符串中，然后输出；(这时如果用print输出，仍然会...
MySQL 加锁处理分析
admin 12年前（2015-03-17） 96浏览
背景 MySQL/InnoDB的加锁分析，一直是一个比较困难的话题。我在工作过程中，经常会有同事咨询这方面的问题。同时，微博上也经常会收到MySQL锁相关的私信，让我帮助解决一些死锁的问题。本文，准备就MySQL/InnoDB的加锁问题，展开较为深入...
MySQL整型数据溢出的处理策略
admin 12年前（2015-03-17） 78浏览
今天接到一个朋友电话说是觉的数据库被别人更改了，出现数据不对的问题 。经过很久的排查是数据类型溢出了（发生问题的版本是MySQL 5.1）。后来通过给朋友那边把MySQL 5.1升级到MySQL 5.5去解决这个问题。 这也让我有兴趣去了解一下MyS...
大型新闻网站点击量的技术方案
admin 12年前（2015-03-16） 3647浏览
网友提问： 1.问题主题 如何记录用户发表的文章的点击量 2.问题补充描述 当并发非常小的时候可以直接存在这个文章表里面，叫一个click_count，但是如果网站的访问量很高，那这样数据库肯定要累死，各位大牛有什么好的解决办法么？ 回答： 我们只讨...
CentOS 下搭建 Git WEB管理平台
admin 12年前（2015-03-16） 7269浏览
Ruby的安装 因为CentOS源里的ruby版本太低，我们直接下载源码进行安装 安装之前确认系统中已经安装了libyaml 没有的话直接下载源码安装 wget http://pyyaml.org/download/libyaml/yaml-0.1....
MySQL认证协议
admin 12年前（2015-03-16） 84浏览
本文是针对MySQL 5.5.9写的。MySQL协议是向老版本兼容的。老版本的MySQL Client可能不理解下面的某些字段而忽略掉。 实际使用的时候，服务器的协议版本应当大于等于客户端。遗憾的是，MySQL并没有对每一次协议变动标一个数字。 本文...
GitLab搭建与维护（基于docker镜像sameersbn/docker-gitlab）
admin 12年前（2015-03-16） 6249浏览
GitLab搭建与维护（基于docker镜像sameersbn/docker-gitlab） Cyent (QQ:57237382) Create date: 2014/11/11 09:32 Last Update: 2014/11/11 18:4...
Mysql数据库主从心得整理
admin 12年前（2015-03-16） 3204浏览
管理mysql主从有2年多了，管理过200多组mysql主从，几乎涉及到各个版本的主从，本博文属于总结性的，有一部分是摘自网络，大部分是根据自己管理的心得和经验所写，整理了一下，分享给各位同行，希望对大家有帮助，互相交流。 一、mysql主从的原理 ...
MySQL utf8mb4问题
admin 12年前（2015-03-16） 104浏览
查看mysql的用户手册能发现，mysql进行字符编码转换的步骤很明确： 1. MySQL Server收到请求时将请求数据从character_set_client转换为character_set_connection； 2. 进行内部操作前将请求...
coreseek sphinx 创建表和索引
admin 12年前（2015-03-16） 92浏览
前面说了，coreseek sphinx mmseg mysql等的安装，下面说一下怎么使用。 一,coreseek sphinx启动后，会多出一个端口，并且可以像mysql一样登录，但不是登录mysql [root@localhost tank]#...
如何安全地关闭MySQL实例
admin 12年前（2015-03-16） 101浏览
本文分析了mysqld进程关闭的过程，以及如何安全、缓和地关闭MySQL实例，对这个过程不甚清楚的同学可以参考下。 关闭过程： 1、发起shutdown，发出 SIGTERM信号 2、有必要的话，新建一个关闭线程(shutdown thread) 如...
web.py 数据库操作指南
admin 12年前（2015-03-16） 91浏览
官网地址：http://webpy.org/ web.py是一个小巧灵活的框架，最新稳定版是0.33。这里不介绍web开发部分，介绍下关于数据库的相关操作。 很多Pyer一开始都喜欢自己封装数据库操作类，本人亦如此。不过后来通过观摩web.py的源码...