我正在寻找优化我在 EC2 上的设置。CentOS 6, nginx 1.0.15, php 5.4.4 with php-fpm, xcache 2.0.0, mysql 5.5.24-55-log, redis 2.4.10, EC2 High Cpu XLarge (c1.xlarge 8 cores, 7G ram)对于高流量站点,写入每个请求。生成的网络请求非常小(javascript 片段)。
基本上,它是一个 100% 的动态环境(插入或更新)。在每个 Web 请求上,我都需要在 memcached 中进行快速查找,然后在每个页面请求中记录一些属性。我在世界各地有几台 EC2,每天帮助处理超过 6 亿个请求。这个想法是我记录数据并每小时转储它以由其他机器处理。每台机器每天已经处理了大约20M。我尝试了一些数据存储,一些注释如下:
MySQL
- 使用每小时表来存储数据,因此在 2012 年 9 月 5 日上午 11 点专门写入 log_2012_09_05_11。
- 使用临时存储
- 事实证明,MyISAM 对我来说比 innodb 快。我玩过缓冲池,我似乎总是用 myisam 获得更好的性能。也可以在此处接受有关调整的任何建议,但查询速度很快。Myisam 锁定时间非常小。
- 我使用 xdebug 对代码进行了分析,在高负载下,98% 的时间都花在了连接 mysql 上。然后我能够通过使用 mysqli 的持久连接来获得更好的性能。
- Max ~2200 rps , 之后获取网关超时和缓慢响应
- 服务器负载最大 1 或 2(8 核机器)
雷迪斯
- 我真的认为这会很棒,但似乎 php 是瓶颈。
- 最大 ~5-600 rps。
- 这是写像“log_2012_09_05_11_12345”这样的键,12345 每小时来自一个INCR 计数器。
- 每 15 分钟保存到磁盘一次(如果我没记错的话,操作大约需要 2 分钟)
我可以从这台 EC2 机器和 100% 写入场景中实际期望每秒多少个请求?我受 EC2 的磁盘性能或 php 或 mysql 的约束吗?我可以将其配置为使用更多 CPU 或更好地使用它正在使用的资源吗?
PHP-FPM http://pastebin.com/raw.php?i=9n2cpqrq
NGINX (nginx.conf) http://pastebin.com/raw.php?i=XuVBKr8m