redisDB - 数据持久化方案


未知
Linux
C/C++

软件简介

基于redis和mysql的数据持久化方案

redis运行时连接数据库 cache失效时同步读mysql, 数据修改时候通过消息队列通知DB线程写mysql reids.conf增加几个配置选项
mysql_host
mysql_port
mysql_user
mysql_pwd
mysql_dbname
persistence_mmap_file: 消息列队指定的mmap映射文件
write_thread_num 写DB线程数

对key的命名有规范 “tablename_ID(int)”形式, 如果仅仅是 “tablename” 则系统解析的时候ID默认为0 例如 “user_1”
系统会自动对应”user”表的ID为1的行 “user_0” 或者 “user” 系统会自动对应”user”表的ID为0的行

目前支持 string, list, zset, 以及incr 格式, mysql表结构不需要自己定义,系统自动映射 消息队列采用无锁队列,
支持mmap与malloc两种方式, 采用mmap方式理论上在程序意外死掉的时候不丢失队列数据 经过压力测试, 修改前和修改后的redis性能损耗为10%
- 20%, 后期会考虑再进行优化 另外因为是同步读DB, 如果大量的cache失效会带来严重的io阻塞, 从而影响性能,
后期考虑加入配置选项在redis启动以后主动从db恢复数据

基于redis 2.6.16修改