python+uwsgi导致redis无法长链接引起性能下降问题记录
admin 8年前 (2017-01-06) 3566浏览 0评论
今天在部署python代码到预生产环境时，web站老是出现redis链接未初始化，无法连接到服务的提示，比对了一下开发环境与测试环境代码，完全一致，然后就是查看各种日志，排查了半天也没有查明是什么原因引起的。 没有办法的情况下，直接登录服务器，从uw...
标签：对比
patch文件的结构 使用和制作patch文件
admin 9年前 (2016-06-15) 4388浏览 0评论
创建补丁文件： diff -Naur 旧的目录 新的目录 > patch文件 或者 diff -Naur 旧的文件 新的文件 > patch文件 对于目录层数的一些限制 在创建patch的时候文件夹的层数应当是一样的，比如 --- old...
浅谈redis数据库的键值设计
admin 10年前 (2015-04-20) 3489浏览 0评论
丰富的数据结构使得redis的设计非常的有趣。不像关系型数据库那样，DEV和DBA需要深度沟通，review每行sql语句，也不像memcached那样，不需要DBA的参与。redis的DBA需要熟悉数据结构，并能了解使用场景。 下面举一些常见适合k...
Nginx模块fastcgi_cache的几个注意点
admin 10年前 (2014-11-10) 4812浏览 0评论
在web项目中，大家都已经非常熟悉其架构流程了。都说Cache是万金油，哪里不舒服抹哪里。这些流程中，几乎每个环节都会进行cache。从浏览器到webserver，到cgi程序，到DB数据库，会进行浏览器cache，数据cache，SQL查询的cac...
python单进程能否利用多核cpu的测试结论
admin 10年前 (2014-09-14) 4319浏览 0评论
在很早的时候，就听网上的文章说: python有GIL，所以在单进程内，即使使用多线程也无法利用到多核的优势，同一时刻，python的字节码只会运行在一个cpu上。 以前也是奉为真理，直到今天在对自己的python server做性能测试的时候，发现...
memc-nginx和srcache-nginx模块构建高效透明的缓存机制
admin 10年前 (2014-09-13) 3850浏览 0评论
为了提高性能，几乎所有互联网应用都有缓存机制，其中Memcache是使用非常广泛的一个分布式缓存系统。众所周知，LAMP是非常经典的Web架构方式，但是随着Nginx的成熟，越来越多的系统开始转型为LNMP（Linux+Nginx+MySQL+PHP...
[MySQL优化案例]系列 — 分页优化
admin 10年前 (2014-07-29) 3385浏览 0评论
通常，我们会采用ORDER BY LIMIT start, offset 的方式来进行分页查询。例如下面这个SQL： SELECT * FROM `t1` WHERE ftype=1 ORDER BY id DESC LIMIT 100, 10; 或...
各种 Comet 技术优缺点对比
admin 10年前 (2014-07-29) 4699浏览 0评论
script tag iframe ajax websocket polling 低效, 可以跨域 / 低效, 无法跨域 / long-polling 中效, 可以跨域 中效, 无法跨域 中效, 无法跨域 / streaming / 高效, 无法跨域...
单线程和多线程diff问题追查
admin 10年前 (2014-07-23) 2971浏览 0评论
1.问题背景 运行于一个进程中的多个线程，彼此之间使用相同的地址空间，共享大部分数据，因此启动一个线程所花费的空间远远小于启动一个进程所花费的空间，线程间彼此切换所需的时间也远远小于进程间切换所需要的时间，一个线程的开销大约是一个进程的开销1/30左...
数据库性能测试方案示例
admin 10年前 (2014-07-23) 3559浏览 0评论
前言 ： 究竟怎样进行数据库性能测试，数据库性能测试需要做些什么？大多数产品线的RD和QA也比较迷茫，经常过来咨询。 一般说来，做数据库性能测试需要如下几个步骤： ：明确测试目的 ：设计测试模型 （即压力模型） ：准备测试集群环境 ：准备压力测试工具...
Ngx_lua与go高并发性能对比
admin 11年前 (2014-07-10) 3186浏览 0评论
nginx在处理高并发能力上非常出色，而go作为新时代互联网语言，在设计之初就为实现高并发。 ngx_lua由nginx来处理网络事件，并使用协程来实现非阻塞，从而实现高并发。 go语言级别提供非阻塞的api，同样使用协程来提供高并发处理。 我们来测...
Shell工具：jsondiff.sh
admin 11年前 (2014-03-20) 3183浏览 0评论
我最近忙着重构一个历史项目，不过由于客观条件所限，没有测试用例可用，以至于我不得不通过人肉对比新旧服务器的结果集是否一致来判断对错。既然说懒惰是程序员的美德，所以我想还是写一个工具吧，加之结果集为JSON，于是便有了jsondiff.sh。 逻辑很简...
python字符串匹配工具性能比较
admin 12年前 (2012-10-23) 11080浏览 0评论
做敏感词过滤的时候要用到字符串匹配，从一个文件中读入需要匹配的敏感词，和一段文本去匹配，用string的find方法是不太合适了，搜了一下，发现AC自动机的方式更好。AC自动机是一个可以用来快速进行多关键字匹配的数据结构，具体信息可以参见这篇经典的论...