ITeye博客

2016 年文章归档

共 6 篇文章

listen queue of socket full !!! 深入排查和分析

最近抽时间总结下对于该问题近期的排查过程和分析; 问题背景: web服务器使用的是nginx + uwsgi 的架构; 近期发现服务器上偶然会出现 *** uWSGI listen queue of socket 4 full !!! (100/100) *** 这样的日志;并且很难重现,有时候出现一段时间会自己回归正常,如下图: 图1 uwsgi listen queue full 问题分析: 由于是线上不定时重现,并且自动会好,并且表面上看应该是listen 队列满的原因。排除是代码逻辑等问题,怀疑是 资源和访问方式问题导致的; 首先要在环境中复现这种情况,以便发现更深入的原因; 看到l…

2016-11-17 19:00 · 开发经验

项目Redis 应用实例

Redis 目前应用相当广泛,由于是内存存储,性能很好,所以也在很多业务场景下都有其适用性,前段时间经常有同事问到使用Redis 的细节问题,如该使用它的哪种类型来解决某种场景下的某些问题,本文总结整理后,并给出实际的使用实例。 首先Redis 是开源的,ANSI C语言编写,key-value 的存储系统,内存存储数据,也可以通过配置根据策略去持久化数据。 包含五种数据结构: 一、String 字符串 最基础的数据存储类型,并且是二进制安全,也就是说该类型可以接受任何格式数据,图像,文字等,应用场景主要适用于热数据的缓存;其主要操作有,get set 等; 下边是一个常用的模式,当有数据的…

2016-05-21 19:37 · Redis

web server 多进程处理web请求遇到的一些问题

uwsgi 处理web 请求使用了多进程的模式,接收到web请求后可能由不同的进程去处理。 问题背景: 一、前段时间写了个api, 这个api 是在django项目中的,并且使用的是nginx+uwsgi的方式提供服务的。在api 中 使用了django 的 get_or_create来保证数据表的唯一性。 XXX.objects.get_or_create(custom_column_id=custom_column_id, l_id=l_id) 二、调用这个api 的客户端只有一个进程,并且使阻塞式的串行调用,只有在第一个接口返回后才进行下一次的请求。 三、结果经过长期的运行发现,数据表…

2016-03-16 12:18 · 开发经验

django mysql 查询不出数据表中的新数据(数据库事务)

**背景:**实际django项目中遇到这样一个问题,两个进程A,B去读写MySQL数据库,A 在insert m 完成后通过redis 通知B去读MySQL。如下图所示,在进程B允许过程中,往数据库多插入几十条数据后,进程B依然查询不到。如下图所示:实际数据表中有6250,但是在进程中查询只有6218条,他对进程启动动新增的数据都查询不到。 问题:A insert完成后,这时B并不能查询到新增的记录m。但是通过其他客户端工具可以看到新增的m记录,特别的是B进程在重启后也能看到记录m。 当然更有意思的是这种现象在开发环境中并不会出现,只在测试环境中会有该问题。 分析1:由于项目使用的djan…

2016-03-08 18:55 · 数据库

MySQL的事务隔离级别

问题背景:前几天在项目中遇到 两个进程 query MySQL数据不一致的情况,现象是进程A在insert 后,进程B select 不出来。后来发现 A B 都是用了事务,B中设置了autocommit = 0 表示手动提交事务。 问题分析:由于数据库有事务隔离机制,不同的事务隔离级别会导致两个事务查询出不同的结果。详细资料见《参考资料》,其实质就是两个不同的事务在修改增加数据后是否对另一个事务可见的问题。 SQL标准规定了以下四种隔离级别。 假如有A B 两个事务; 一、Read uncommitted (读未提交) 最低的事务隔离级别,,在事务B未commit前,A事务就能查询到B事务…

2016-03-08 18:46 · 数据库

TCP状态变化总结

在开发和维护过程中总是离不开网络,网络几乎总是离不开TCP的知识。 经过平时的实践和看书的收获。 在这里总结一下TCP协议的各个状态的含义。 ps: 通过netstat 命令可以看到当前TCP所处于的状态。 一、 网上的一张TCP状态变迁图如下,它描述了所有的TCP状态已经可能的状态变化。 二、可以分成服务器和客户端来描述TCP状态的变化。 三、服务器端调用listen系统调用后处于 LISTEN状态。此时等待客户端主动连接的到来。 四、当服务器端接受到客户端的SYN连接报文,并且回复了SYN的确认(ACK)报文后就变为SYN RCVD状态。表示客户端来的SYN已经接收到。 五、在四的基础上…

2016-01-24 11:40 · 计算机网络