Code Monkey home page Code Monkey logo

caisan / reading-and-comprehense-redis-2.9.11 Goto Github PK

View Code? Open in Web Editor NEW

This project forked from y123456yz/reading-and-comprehense-redis-cluster

0.0 3.0 0.0 18.88 MB

redis源码阅读分析注释,带详尽注释以及相关流程调用注释,提出改造点,对理解redis源码很有帮助,解决了source insight中文注释乱码问题

License: GNU Lesser General Public License v2.1

Makefile 0.53% C 76.73% Shell 0.54% Perl 3.52% Groff 1.18% HTML 7.88% XSLT 0.01% C++ 0.68% CSS 0.03% Batchfile 0.02% Lua 0.25% Ruby 1.11% Tcl 7.50% Smarty 0.02%

reading-and-comprehense-redis-2.9.11's Introduction

Reading-and-comprehense-redis-2.9.11

reading-redis-2.9.11

redis-2.9.11阅读理解,带详细注释

本份代码从https://github.com/huangz1990/redis-3.0-annotated clone下来,然后自己添加自己的理解,再次基础上增加函数调用流程注释。 参考数据<redis涉及实现>

阅读工具source insight,如果中文乱码,按照source insight configure目录中说明操作

本代码解决了huangz1990原始代码source insight中文乱码问题

阅读redis源码目的? 了解内存数据库相关优秀数据结构,由于前期已经通读完毕nginx源码,阅读redis源码是为了配合nginx来实现静态资源加速,为后期提升nginx性能做准备。

阅读进度:本代码对redis源码主要功能进行了详细注释,并加上了自己的理解。redis源码大体阅读完毕,并注释添加了相关函数的调用流程。

注:由于redis集群功能官方暂时没有文档版本,因此redis集群源码暂时没有研究。等出了文档版本,在研究注释。

redis源码阅读完后,发现以下问题及改造点:

问题: set 和 setbit没有做标记区分都采用REDIS_STRING类,编码方式也一样。 如果set test abc,然后继续执行setbit test 0 1;是会成功的。会造成test键内容被无意修改。可以增加一种编码encoding方式来加以区分。

可以改造的地方: 改造点1: 在应答客户端请求数据的时候,全是epoll采用epool write事件触发,这样不太好,每次发送数据前通过epoll_ctl来触发epoll write事件,即使发送 一个"+OK"字符串,也是这个流程。 改造方法: 开始不把socket加入epoll,需要向socket写数据的时候,直接调用write或者send发送数据。如果返回EAGAIN,把socket加入epoll,在epoll的 驱动下写数据,全部数据发送完毕后,再移出epoll。 这种方式的优点是:数据不多的时候可以避免epoll的事件处理,提高效率。 这个机制和nginx发送机制一致。 后期有空来完成该优化。

改造点2:
	在对key-value对进行老化删除的过程中,采用从expire hash桶中随机取一个key-value节点,判断是否超时,超时则删除,这种方法每次采集点有很大
	不确定性,造成空转,最终由没有删除老化时间到的节点,浪费CPU资源。

	改造方法:在向expire hash桶中添加包含expire时间的key-value节点,在每个具体的table[i]桶对应的链中,可以按照时间从小到大排序,每次删除老化的时候
	直接取具体table[i]桶中的第一个节点接口判断出该桶中是否有老化时间到的节点,这样可以很准确的定位出那些具体table[i]桶中有老化节点,如果有则取出
	删除接口。

改造点3:
	主服务器同步rdb文件给从服务器的时候是采用直接读取文件,然后通过网络发送出去,首先需要把文件内容从内核读取到应用层,在通过网络应用程序从应用层
	到内核网络协议栈,这样有点浪费CPU资源和内存。

	改造方法:通过sendfile或者aio方式发送,避免多次内核与应用层交互,提高性能。

发现可疑问题:
1.主从服务器之间通过ack进行链路探测,他们之间的tcp连接默认tcp-keepalive=0,也就是不开启内核自动keepalive保活,如果在链路不通的情况下
  (例如直接把主服务器网线拔掉或者直接关机),从服务器长时间无法自动切换到主服务器来提高服务

修改方法:增加应用层保活超时检测,可以增加链路保活探测定时器,服务器长时间没有接收到彼此的保活报文,则直接主动断开TCP连接,从而让备切换为主服务器提高服务。

reading-and-comprehense-redis-2.9.11's People

Contributors

y123456yz avatar

Watchers

 avatar  avatar  avatar

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.