KVM模块单独编译(适合调试)
admin 7年前 (2017-02-04) 3789浏览 0评论
当前系统环境： CentOS Linux release 7.2.1511 (Core) 在说kvm模块单独编译之前，难免设计到linux内核模板的编写，所以这里也稍微提一下。 1linux内核模块环境搭建 这里有2种方法： 1.1 升级内核： 升级...
标签：测试
python+uwsgi导致redis无法长链接引起性能下降问题记录
admin 7年前 (2017-01-06) 3377浏览 0评论
今天在部署python代码到预生产环境时，web站老是出现redis链接未初始化，无法连接到服务的提示，比对了一下开发环境与测试环境代码，完全一致，然后就是查看各种日志，排查了半天也没有查明是什么原因引起的。 没有办法的情况下，直接登录服务器，从uw...
MySQL 性能优化：性能提升 50%，延迟降低 60%
admin 8年前 (2016-09-10) 3588浏览 0评论
当我进入 Pinterest 时，我的头三个星期是在本部度过的，在那里最新工程把解决生产问题的成果应用到了整个软件栈中。在本部，我们通过构建 Pinterest 来学习 Pinterest 是怎样被构建的，并且，仅仅在几天里就提交代码、做出有意义的贡...
Cgroups Memory子系统数据不正确的问题
admin 8年前 (2016-01-07) 3412浏览 0评论
工作中，需要对单个MySQL进程进行限制，并且对MySQL进程消耗的IO，CPU Time，Memory等进行统计，首先想到的就是使用Cgroups对进程进行限制，同时，Cgroups提供的一些接口，也可以非常方便地读取到进程消耗的IO，CPU Ti...
测试工具Bonnie++的使用
admin 9年前 (2015-09-13) 5157浏览 0评论
Bonnie++是一个用来测试UNIX文件系统性能的测试工具，主要目的是为了找出系统的性能瓶颈，其名字来源于作者喜爱的歌手Bonnie Raitt。 Bonnie++在类似的测试工具和软件中不是最大的和最复杂的，但是在易用性和输出结果显示方面很不错。...
Python 中的进程、线程、协程、同步、异步、回调
admin 9年前 (2015-07-19) 5824浏览 1评论
进程和线程究竟是什么东西？传统网络服务模型是如何工作的？协程和线程的关系和区别有哪些？IO过程在什么时间发生？ 在刚刚结束的 PyCon2014 上海站，来自七牛云存储的 Python 高级工程师许智翔带来了关于 Python 的分享《Python中...
logstash-input-file以及logstash-output-kafka插件性能测试
admin 9年前 (2015-07-16) 12071浏览 0评论
最近项目需求,要了解下logstash的一些性能,根据现有的技术方案,主要是针对 logstash-input-file 插件以及 logstash-output-kafka 插件进行测试,不过最近关注 logstash 的人应该清楚,目前处于新老版...
分布式对象存储系统Sheepdog性能测试
admin 9年前 (2015-04-06) 3580浏览 0评论
Sheepdog是一个分布式对象存储系统，专为虚拟机提供块存储，号称无单点、零配置、可线性扩展（省略更多优点介绍）。本文主要关注其性能究竟如何，测试版本为目前的最新稳定版0.7.4。 测试环境 节点数量：6个 磁盘：各节点都配备7200转SATA硬盘...
mysql 为什么要关闭 query cache 如何关闭
admin 9年前 (2015-03-30) 3026浏览 0评论
备注：插图来自淘宝苏普的博客并保留水印，如果觉得不当还请及时告知 ：） 写在前面：MySQL的query cache大部分情况下其实只是鸡肋而已，建议全面禁用。当然了，或许在你的场景下还是挺好的，还能发挥作用，那就继续使用吧，把本文当做参考就好。 不...
python网站自动登录post数据的实例分析
admin 9年前 (2015-03-05) 3425浏览 0评论
有个网友百度到了我的文章《python模拟登陆登陆二：获取和处理发送post request和head数据》，其中就遇到post的部分参数动态改变的问题，因为部分参数是javascript运行得到的结果。 网友的邮件如下： 很有幸能看到你的文章《py...
python模拟登陆登陆二：获取和处理发送post request和head数据
admin 9年前 (2015-03-05) 7682浏览 0评论
上篇文章《python模拟登陆登陆一：验证码与cookies的同步处理思路》 ，我验证了下自动登录的过程，以cookies与验证码如何同步的问题。 今天这篇文章说下如何获取和处理发送post request和head数据。 工具： firefox浏览...
linux下mutex与atomic性能比较
admin 9年前 (2015-01-28) 4037浏览 0评论
#include <boost/atomic/atomic.hpp> #include <iostream> #include <stdlib.h> #include <boost/thread/mutex....
百度sitemap1.0一直校验中及sign检测失败的解决方法
admin 9年前 (2015-01-21) 3890浏览 0评论
百度推出了sitemap1.0结构化数据wordpress插件无疑帮助了广大站长的忙了，可是新东西难免会出现各种各样的bug，就像我一样，就遇到了sign检测失败的情况，去网上搜索了很多网页发现都没有给出正确的解决方法，我是个技术狂，所以就敢为人先，...
web扫描爬虫优化
admin 9年前 (2014-12-25) 2786浏览 0评论
0x01 需求背景 公司要弄自动化的扫描工具，目前市面上的工具都无法针对业务进行检测，所以只能自己开发。辣么，就有个问题，爬虫需要自己去写。。。 之前自己也写过相关的爬虫，但是要么是半成品，要么就是垃圾代码…很多都无法直接引用，所以，在强大的KPI考...
python模拟mysql多客户端并发操作
admin 10年前 (2014-11-13) 5769浏览 0评论
为测试系统多线程并发操作时的响应，今天写了个简单的python脚本往mysql中插入、取出数据，用到了MySQLdb、threading模块。 其中threading模块是对thread模块的一个面向对象的封装，比较好用。 import MySQLd...
Nginx模块fastcgi_cache的几个注意点
admin 10年前 (2014-11-10) 4639浏览 0评论
在web项目中，大家都已经非常熟悉其架构流程了。都说Cache是万金油，哪里不舒服抹哪里。这些流程中，几乎每个环节都会进行cache。从浏览器到webserver，到cgi程序，到DB数据库，会进行浏览器cache，数据cache，SQL查询的cac...
通过FastCGI Cache实现服务降级
admin 10年前 (2014-11-10) 3090浏览 0评论
在自然界中，很多生物面临生死考验的时候，往往会做出惊人的反应，其中最为大家熟知的当属壁虎，危难关头，与其坐以待毙，不如断尾求生，通过自残来换取活下去的希望。对于互联网项目而言，同样存在着很多生死考验，比如：访问量激增；数据库宕机等等，此时如果没有合理...
MySQL 数据库双主改造
admin 10年前 (2014-11-05) 3367浏览 0评论
对于使用中的已有了一些数据库的 MySQL, 如何改造成双主呢? 这里写一篇文章, 详细记录操作步骤. 听取各位的意见. 这里假设有两台服务器: A 和 B. 要让他们互为主, 但实际使用时, 不同的服务器只服务不同的 db, 避免出现数据冲突. 1...