新闻资讯  快讯  焦点  财经  政策  社会
互 联 网   电商  金融  数据  计算  技巧
生活百科  科技  职场  健康  法律  汽车
手机百科  知识  软件  修理  测评  微信
软件技术  应用  系统  图像  视频  经验
硬件技术  知识  技术  测评  选购  维修
网络技术  硬件  软件  设置  安全  技术
程序开发  语言  移动  数据  开源  百科
安全防护  资讯  黑客  木马  病毒  移动
站长技术  搜索  SEO  推广  媒体  移动
财经百科  股票  知识  理财  财务  金融
教育考试  育儿  小学  高考  考研  留学
您当前的位置:首页 > IT > 数据库 > Redis

Redis RDB文件解析

时间:2019-05-15 10:41:25  来源:  作者:

rdb文件是redis实现持久化方式的一种,即通过save或bgsave操作,执行数据备份,生成的.rdb后缀的数据文件。

save和bgsave都是调用rdbSave实现备份的,只不过save是阻塞式,bgsave是非阻塞式,通过fork子进程执行备份,主进程可以继续接收外部请求。源码如下:

一、save方法

直接调用rdbsave()方法

void saveCommand(client *c) {
 if (server.rdb_child_pid != -1) {
 addReplyError(c,"Background save already in progress");
 return;
 }
 rdbSaveInfo rsi, *rsiptr;
 rsiptr = rdbPopulateSaveInfo(&rsi);
 if (rdbSave(server.rdb_filename,rsiptr) == C_OK) {
 addReply(c,shared.ok);
 } else {
 addReply(c,shared.err);
 }
}

二、bgsave方法

调用的是rdbSaveBackground()方法

/* BGSAVE [SCHEDULE] */
void bgsaveCommand(client *c) {
 int schedule = 0;
 /* The SCHEDULE option changes the behavior of BGSAVE when an AOF rewrite
 * is in progress. Instead of returning an error a BGSAVE gets scheduled. */
 if (c->argc > 1) {
 if (c->argc == 2 && !strcasecmp(c->argv[1]->ptr,"schedule")) {
 schedule = 1;
 } else {
 addReply(c,shared.syntaxerr);
 return;
 }
 }
 rdbSaveInfo rsi, *rsiptr;
 rsiptr = rdbPopulateSaveInfo(&rsi);
 if (server.rdb_child_pid != -1) {
 addReplyError(c,"Background save already in progress");
 } else if (server.aof_child_pid != -1) {
 if (schedule) {
 server.rdb_bgsave_scheduled = 1;
 addReplyStatus(c,"Background saving scheduled");
 } else {
 addReplyError(c,
 "An AOF log rewriting in progress: can't BGSAVE right now. "
 "Use BGSAVE SCHEDULE in order to schedule a BGSAVE whenever "
 "possible.");
 }
 } else if (rdbSaveBackground(server.rdb_filename,rsiptr) == C_OK) { #实际上调用的是rdbSaveBackground方法
 addReplyStatus(c,"Background saving started");
 } else {
 addReply(c,shared.err);
 }
}

三、rdbSaveBackground方法

int rdbSaveBackground(char *filename, rdbSaveInfo *rsi) {
 pid_t childpid;
 long long start;
 if (server.aof_child_pid != -1 || server.rdb_child_pid != -1) return C_ERR;
 server.dirty_before_bgsave = server.dirty;
 server.lastbgsave_try = time(NULL);
 openChildInfoPipe();
 start = ustime();
 if ((childpid = fork()) == 0) {
 int retval;
 /* Child */
 closeListeningSockets(0);
 redisSetProcTitle("redis-rdb-bgsave");
 retval = rdbSave(filename,rsi); # 最终调用的还是rdbsave()方法,但是是在子进程中调用的
 if (retval == C_OK) {
 size_t private_dirty = zmalloc_get_private_dirty(-1);
 if (private_dirty) {
 serverLog(LL_NOTICE,
 "RDB: %zu MB of memory used by copy-on-write",
 private_dirty/(1024*1024));
 }
 server.child_info_data.cow_size = private_dirty;
 sendChildInfo(CHILD_INFO_TYPE_RDB);
 }
 exitFromChild((retval == C_OK) ? 0 : 1);
 } else {
 /* Parent */
 server.stat_fork_time = ustime()-start;
 server.stat_fork_rate = (double) zmalloc_used_memory() * 1000000 / server.stat_fork_time / (1024*1024*1024); /* GB per second. */
 latencyAddSampleIfNeeded("fork",server.stat_fork_time/1000);
 if (childpid == -1) {
 closeChildInfoPipe();
 server.lastbgsave_status = C_ERR;
 serverLog(LL_WARNING,"Can't save in background: fork: %s",
 strerror(errno));
 return C_ERR;
 }
 serverLog(LL_NOTICE,"Background saving started by pid %d",childpid);
 server.rdb_save_time_start = time(NULL);
 server.rdb_child_pid = childpid;
 server.rdb_child_type = RDB_CHILD_TYPE_DISK;
 updateDictResizePolicy();
 return C_OK;
 }
 return C_OK; /* unreached */
}

在了解rdb文件是怎么生成后,接下来就看看rdb文件内容,rdb文件是二进制格式的,直接打开是乱码,可以使用命令 od -c xxx.rdb 查看

四、RDB文件内容解析

本地先安装redis吧(此处省略)

由于是之前安装好的,此处执行flushall命令情况redis数据库

Redis RDB文件解析

 

接下来执行save,默认是dump.rdb文件,文件名在redis.window.conf里配置,

conf文件配置

# The filename where to dump the DB
dbfilename dump.rdb

使用od -c 查看

Redis RDB文件解析

 

RDB文件结构包括REDIS、rdb_version、databases、EOF以及check_sum,databases部分包含SELECTDB、db_number、key_value_pairs,如下图:

Redis RDB文件解析

 


Redis RDB文件解析

 

其中:
REDIS:是证明rdb文件,5字节
0006:版本号,1字节
377:EOF,
377之后的是checknum
因为无数据,所以也没有databases信息

再看一个有数据的rdb文件

Redis RDB文件解析

 

其中:
REDIS:是证明rdb文件,5字节
0006:版本号,1字节
376:SELECTDB
:0号数据库,默认有16个数据库,总数可在配置中修改,databases 16
:是数据类型type,0是string
004:数据长度
name:是字符串key
004:值长度
jack:key的值
377:EOF
377后面的是checknum

Tags:Redis   点击:()  评论:()
声明:本站部分内容来自互联网,如有任何版权侵犯或其他问题请与我们联系,我们将立即删除或处理。
▌相关评论
发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表
▌相关推荐
rdb文件是redis实现持久化方式的一种,即通过save或bgsave操作,执行数据备份,生成的.rdb后缀的数据文件。save和bgsave都是调用rdbSave实现备份的,只不过save是阻塞式,bgsave是非...【详细内容】
2019-05-15 10:41:25   点击:(8)  评论:(0)  加入收藏
为什么需要持久化呢?通常情况下redis的数据全部存储在内存中,数据库一旦故障发生重启数据会全部丢失,即使是在redis cluster或者redis sentinel模式下主从同步数据的恢复仍然...【详细内容】
2019-05-15 10:41:25   点击:(2)  评论:(0)  加入收藏
概述redis跟memcached类似,都是内存数据库,不过redis支持数据持久化,也就是说redis可以将内存中的数据同步到磁盘来持久化,以确保redis 的数据安全。不过持久化这块可能比较容易...【详细内容】
2019-05-15 10:41:25   点击:(3)  评论:(0)  加入收藏
一、热点Key问题产生的原因 二、热点Key问题的危害 三、解决方案 四、热点 key 处理 五、方案对比一、热点Key问题产生的原因1、用户消费的数据远大于生产的数据(热卖商品、...【详细内容】
2019-05-15 10:41:25   点击:(2)  评论:(0)  加入收藏
最近在看 UNIX 网络编程并研究了一下 Redis 的实现,感觉 Redis 的源代码十分适合阅读和分析,其中 I/O 多路复用(mutiplexing)部分的实现非常干净和优雅,在这里想对这部分的内容...【详细内容】
2019-05-15 10:41:25   点击:(8)  评论:(0)  加入收藏
通过思维导图整理的Redis的重要知识点一、持久化 二、复制 三、阻塞 四、Redis内存 五、Redis内存优化 六、哨兵 七、缓存设计 ...【详细内容】
2019-05-15 10:41:25   点击:(4)  评论:(0)  加入收藏
Redis 是一个开源的,基于内存的结构化数据存储媒介,可以作为数据库、缓存服务或消息服务使用。Redis 支持多种数据结构,包括字符串、哈希表、链表、集合、有序集合、位图、Hype...【详细内容】
2019-05-15 10:41:25   点击:(2)  评论:(0)  加入收藏
Redis5.0版是Redis产品的重大版本发布,我们先看一下它的最新特点:新的流数据类型(Stream data type) https://redis.io/topics/streams-intro新的 Redis 模块 API:定时器、集群...【详细内容】
2019-05-15 10:41:25   点击:(3)  评论:(0)  加入收藏
Redis本质上是一个Key-Value类型的内存数据库,很像memcached,整个数据库统统加载在内存当中进行操作,定期通过异步操作把数据库数据flush到硬盘上进行保存。...【详细内容】
2019-05-15 10:41:25   点击:(6)  评论:(0)  加入收藏
Redis是一个基于BSD开源的项目,是一个把结构化的数据放在内存中的一个存储系统,你可以把它作为数据库,缓存和消息中间件来使用。同时支持strings,lists,hashes,sets,sorted sets,bitmaps,hyperloglogs和geospatial indexes等数...【详细内容】
2019-05-15 10:41:25   点击:(7)  评论:(0)  加入收藏
推荐资讯
相关文章
栏目更新
栏目热门
'); })();