记一次性能优化，单台4核8G机器支撑5万QPS
admin 8年前（2019-02-06） 1浏览
前言 这篇文章的主题是记录一次Python程序的性能优化，在优化的过程中遇到的问题，以及如何去解决的。为大家提供一个优化的思路，首先要声明的一点是，我的方式不是唯一的，大家在性能优化之路上遇到的问题都绝对不止一个解决方案。 如何优化 首先大家要明确的...
标签：连接
SYN丢包的几个例子
admin 9年前（2017-10-31） 1浏览
如果出现 SYN 丢包，那么将导致严重的性能问题，如果没有严重到完全连不上，那么在延迟时间上会表现出明显的时间特征，比如：1秒，3秒，7秒，15秒，31秒，具体可以参考：「SYN和RTO」，本文不说这个，就说说哪些情况会出现 SYN 丢包。 SYN ...
经典的”服务器最多65536个连接”误解
admin 9年前（2017-08-11） 2浏览
“因为TCP端口号是16位无符号整数, 最大65535, 所以一台服务器最多支持65536个TCP socket连接.” – 一个非常经典的误解! 即使是有多年网络编程经验的人, 也会持有这个错误结论. 要戳破这个错误结论, 可以从理论和实践两方面来...
慢速连接攻击
admin 10年前（2016-06-03） 2浏览
提起攻击，第一反应就是海量的流量、海量的报文。但有一种攻击却反其道而行之，以慢著称，以至于有些攻击目标被打死了都不知道是怎么死的，这就是慢速连接攻击。 slowhttptest是一款对服务器进行慢攻击的测试软件，包含了几种攻击方式，像Slowlori...
百万并发之 tcp_mem
admin 10年前（2016-05-26） 3浏览
The “Out of socket memory” error Out of Socket memory 关于 Out of Socket memory 在服务端，连接达到一定数量，诸如50W时，有些隐藏很深的问题，就不断的抛出来。 通过查看dme...
Iptables数据包、连接标记模块MARK/CONNMARK使用
admin 11年前（2015-11-27） 1浏览
MARK标记用于将特定的数据包打上标签，供Iptables配合TC做QOS流量限制或应用策略路由。 看看和MARK相关的有哪些模块： ls /usr/lib/iptables/|grep -i mark libxt_CONNMARK.so libxt...
Python 中的进程、线程、协程、同步、异步、回调
admin 11年前（2015-11-26） 5浏览
进程和线程究竟是什么东西？传统网络服务模型是如何工作的？协程和线程的关系和区别有哪些？IO过程在什么时间发生？ 在刚刚结束的 PyCon2014 上海站，来自七牛云存储的 Python 高级工程师许智翔带来了关于 Python 的分享《Python中...
如何判断是否丢掉用户请求
admin 11年前（2015-11-24） 2浏览
下面是可能丢数据包的点： 1、交换机 上连和下连端口的流量跑满或链路有问题，有些数据包会被交换机丢掉，抓对应端口的丢包计数值就可以获得这方面的数据。当然，不会每次都丢建立连接的syn数据包，另外，客户端也重传数据包，所以这一块不一定会导致请求数据的丢...
tcp数据重传时间细节探秘及数据中心优化
admin 11年前（2015-11-24） 1浏览
在数据中心网络内，机器之间数据传输的往返时间(rtt)一般在10ms以内，为此调内部服务的超时时间一般会设置成50ms、200ms、500ms等，如果在传输过程中出现丢包，这样的服务超时时间，tcp层有机会发现并重传一次数据么？如果设置成200ms以...
Nginx的accept_mutex配置分析
admin 11年前（2015-08-22） 1浏览
通常多数人不会注意Nginx的accept_mutex配置，不过实际上它对系统的吞吐量有一定的影响，今天生物钟紊乱睡不着觉，索性闲扯一下Nginx的accept_mutex配置。 让我们看看accept_mutex的意义：当一个新连接到达时，如果激活...
TCP协议三次握手连接四次握手断开和DOS攻击
admin 11年前（2015-05-27） 2浏览
TCP连接的状态图 TCP建立连接的三次握手过程，以及关闭连接的四次握手过程 贴一个telnet建立连接，断开连接的使用wireshark捕获的packet截图。 1、建立连接协议（三次握手）（1）客户 端发送一个带SYN标志的TCP报文到服务器。这...
SSH Agent与GNU Screen的兼容问题
admin 11年前（2015-05-12） 1浏览
关于SSH Agent的使用可以见《SSH免密码认证进阶使用》一文，与GNU Screen之间会有这样一个问题： 在客户端运行ssh-agent并启用agent转发； 通过SSH登入服务器，服务器端会在临时文件夹生成auth socks文件A，并将A...
virsh使用qemu+tcp访问远程libvirtd
admin 11年前（2015-04-20） 1浏览
因为ssh的不能访问 所以使用tcp进行对远程libvirtd进行连接访问，例如 virsh -c qemu+tcp://example.com/system 修改文件vim /etc/sysconfig/libvirtd，用来启用tcp的端口 LI...
监控mysql每个ip的连接数
admin 11年前（2015-03-24） 1浏览
要统计数据库的连接数，我们通常情况下是统计总数，没有细分到每个IP上。现在要监控每个IP的连接数，实现方式如下： mysql >select SUBSTRING_INDEX(host,':',1) as ip , count(*) from i...
nginx三个容易引发“瓶颈”的点
admin 12年前（2015-03-17） 2浏览
keepalive_timeout 15s; client_header_timeout 1m; 读取整个头的时间不能超过1分钟 send_timeout 1m; 客户端的连接还在，但是tengine这边发送缓冲区满了（客户端不读取数据，或者读取数据...
万兆网络环境下的nginx压力测试 (二)
admin 12年前（2015-03-16） 1浏览
参考文章：Nginx 万兆网络环境测试 上周在proxy层测试url hash万兆网卡服务器过程中发现服务器内存用满，使用大量的swap，导致服务器无响应。 一、 现象描述： swap 100%，IO超过60%； nginx每进程占用内存达4G，且无...
启用服务器的远程IPMI Console功能
admin 12年前（2015-03-16） 1浏览
背景介绍： IPMI是智能型平台管理接口（Intelligent Platform Management Interface）的缩写，是管理基于 Intel结构的企业系统中所使用的外围设备采用的一种工业标准，该标准由Intel，HP，DELL和Sup...
ssh连接远程服务器超时配置
admin 12年前（2015-03-16） 1浏览
终端上ssh到服务器一段时间不操作就会卡住，得关闭窗口。打开新Tab重连，找了下配置， 以下内容写到 ~/.ssh/config 中 Host * ServerAliveInterval 120 ConnectTimeout 240 转载请注明：爱开...
不要乱用 TCP ENC flag
admin 12年前（2015-03-16） 1浏览
前段时间处理了一个 case，现象很简单，同网络环境下的机器，绝大多数的机器都无法 curl 访问 example.com，仅有少部分的可以 curl 访问，并且他们的 mtr 的路径一模一样，机器的配置应该也有一样。 对比一下，可以访问的： $ c...
一个用户SQL慢查询分析，原因及优化
admin 12年前（2015-03-16） 4浏览
问题描述 一个用户反映先线一个SQL语句执行时间慢得无法接受。SQL语句看上去很简单(本文描述中修改了表名和字段名): SELECT count(*) FROM a JOIN b ON a.S = b.S WHERE a.L > ’2014-0...
limit_zone 和 limit_req_zone nginx 下的限制连接模块
admin 12年前（2015-03-15） 1浏览
nginx 上有两个限制连接的模块一个是 limit_zone 另一个是 limie_req_zone,两个都可以限制连接，但具体有什么不同呢？下面是 nginx 官网上给的解释 limit_req_zone Limit frequency of c...
桥接OpenVPN客户端访问与服务器 同一网段的其它电脑
admin 12年前（2015-03-15） 1浏览
背景： openvpn的服务器和客户端不在同一网络，均连接各自的路由器接入internet。 openvpn版本：2.1.4（OpenVPN 2.1.4 i686-pc-mingw32 [SSL] [LZO2] [PKCS11] built on N...
memc-nginx和srcache-nginx模块构建高效透明的缓存机制
admin 12年前（2015-03-15） 1浏览
为了提高性能，几乎所有互联网应用都有缓存机制，其中Memcache是使用非常广泛的一个分布式缓存系统。众所周知，LAMP是非常经典的Web架构方式，但是随着Nginx的成熟，越来越多的系统开始转型为LNMP（Linux+Nginx+MySQL+PHP...
Linux 命令方式连接 pptp vpn
admin 12年前（2015-03-03） 1浏览
windows下是可以连接vpn的，上网啊都没什么问题。想以centos为客户端，连接远程的VPN，发现不是那么容易，找了半天资料，找到了方法。 1，安装ppp pptp pptp-setup # yum install ppp pptp pptp-...
fpm开启slowlog Fsockopen出现Operation now in progress的问题追踪二
admin 12年前（2015-02-04） 2浏览
关于具体问题，请参见上一篇 fpm开启slowlog Fsockopen出现Operation now in progress的问题追踪一， 本文主要是定位问题。 接上一篇。 引起该问题的原因有两个： 1）connect的socket连接操作是非阻塞...
一次分享引发的血案 — HTTP Slowloris Denial Of Service
admin 12年前（2014-08-14） 1浏览
此文源于近日公司安全部门给我们的一次分享，之前我一直以为会有类似于0day之类的东东（我自作多情了-_-!），结果分享的重头戏却是演示HTTP Slow Header 和 HTTP Slow POST 攻击。 第一次看到这个攻击方式是去年在刺的博客，...
在centos下处理PHP+WebSphere客户端
admin 12年前（2014-06-27） 3浏览
事先申明。我是借鉴了这篇博客：http://blog.phpdeveloper.org/?p=140 当然在其中遇到了不少问题，我在这里一一说明： 1、准备工作 pecl mqseries ：http://pecl.php.net/package/m...
iptables防火墙配置详解
admin 13年前（2014-03-27） 1浏览
iptables简介 iptables是基于内核的防火墙，功能非常强大，iptables内置了filter，nat和mangle三张表。 filter负责过滤数据包，包括的规则链有，input，output和forward； nat则涉及到网络地址转...
建立SSH隧道（SSH端口转发）
admin 13年前（2014-03-13） 1浏览
ssh隧道功能，也就是端口转发功能非常好用，可以实现一些代理功能或者是穿透内网功能。 ssh的端口转发(或者叫做隧道)命令分为三种： 本地：ssh -C -f -N -g -L listen_port:DST_Host:DST_port user@T...
Linux SYN Backlog and somaxconn
admin 13年前（2014-03-12） 2浏览
SYN 包攻击是网络上比较老的一种攻击方式。在 Linux 中，可以通过开启 net.ipv4.tcp_syncookies = 1 来抵抗这种攻击。那么，在开启 syncookies 之后，Linux 系统做了些什么？如何做的？这是本文试图整理的内...
- 1
- 2