网易首页 > 网易号 > 正文 申请入驻

codis-server/redis主从同步超时

0
分享至

问题简介

今天在操作codis集群进行主从同步的时候,发现key加载到快完成的时候,就停下来了,不继续加载key到内存了,等一下又在重新全量同步了。排查日志看到如下内容:

主节点日志:

[12168] 14 Jun 23:47:45.015 # Client id=2527238 addr=X.X.X.X:18890 fd=7 name= age=219 idle=219 flags=S db=0 sub=0 psub=0 multi=-1 qbuf=0 qbuf-free=0 obl=16347 oll=4151 omem=95590296 events=rw cmd=psync scheduled to be closed ASAP for overcoming of output buffer limits.

从节点日志:

Connection with master lost

原因分析

主从复制一般涉及到两个变量:

1、codis-server/redis默认配置中repl-timeout的时间为60s,当复制数据的时间超过60s时,codis-server/redis master就会认为连接超时主动断开连接,也就是Connection with master lost报错。

2、复制数据占用服务器资源的大小client-output-buffer-limit参数就决定了客户端输出缓冲区内存使用量,默认client-output-buffer-limit slave 256mb 64mb 60

从上面的日志可以看到scheduled to be closed ASAP for overcoming of output buffer limits. 这个应该是第二个参数影响的。

解决

先查看一下当前变量的

127.0.0.1:7001> config get client-output-buffer-limit

1) "client-output-buffer-limit"

2) "normal 0 0 0 slave 268435456 67108864 60 pubsub 33554432 8388608 60"

查看:

127.0.0.1:7001> config get client-output-buffer-limit

动态修改:

127.0.0.1:7001> config set client-output-buffer-limit "slave 536870912 134217728 120"

默认:

127.0.0.1:7001> config get client-output-buffer-limit "slave 268435456 67108864 60"

注意:当数据同步完成后最好将配置修改为原配置,避免占用服务器资源过高引起其他问题

如果是要永久生效在配置文件添加以下内容

client-output-buffer-limit slave 268435456 67108864 60

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
果然有猫腻?普京突然宣布爆炸性消息,一番话直指凶手,不简单

果然有猫腻?普京突然宣布爆炸性消息,一番话直指凶手,不简单

莫将离
2024-03-28 22:20:43
大结局真要来了?泽连斯基罕见说软话,承认现在打不过俄罗斯

大结局真要来了?泽连斯基罕见说软话,承认现在打不过俄罗斯

军事作家陈曦
2024-03-29 15:35:10
3比1艰难击败黑马!27岁世界冠军赢得不容易,网友:实力一般

3比1艰难击败黑马!27岁世界冠军赢得不容易,网友:实力一般

体坛知识分子
2024-03-29 06:20:09
烧烤店老板谈淄博烧烤爆火一年后现状:顾客翻了一倍

烧烤店老板谈淄博烧烤爆火一年后现状:顾客翻了一倍

大众日报
2024-03-28 15:15:00
你和老公一周几次?采访三位女性后,我得到了意外答案

你和老公一周几次?采访三位女性后,我得到了意外答案

户外阿崭
2024-03-29 12:12:19
广东省长王伟中:广东现在人气很旺 在粤实有人口超过1.5亿人

广东省长王伟中:广东现在人气很旺 在粤实有人口超过1.5亿人

财联社
2024-03-29 15:03:45
2024款奥迪Q7内饰正式曝光,三联屏+按键换挡,预计63.28万起售!

2024款奥迪Q7内饰正式曝光,三联屏+按键换挡,预计63.28万起售!

美食观点
2024-03-29 08:30:11
成都一公园发现的,是不是发生了一场大战?超级尴尬画面哈哈

成都一公园发现的,是不是发生了一场大战?超级尴尬画面哈哈

涛涛生活搞笑
2024-03-29 20:24:38
中国研制运40,独创颠覆技术,4发涡扇40暴力推进,600吨全球最强

中国研制运40,独创颠覆技术,4发涡扇40暴力推进,600吨全球最强

梁讯
2024-03-29 12:16:05
3比0横扫中国名将!张本智和打出高光表现,巴黎奥运抢夺金牌?

3比0横扫中国名将!张本智和打出高光表现,巴黎奥运抢夺金牌?

体坛知识分子
2024-03-29 06:25:06
江西省抚州市政协原副主席吴建发被开除党籍

江西省抚州市政协原副主席吴建发被开除党籍

界面新闻
2024-03-29 17:45:18
中央候补委员,进京任职!

中央候补委员,进京任职!

上观新闻
2024-03-28 22:10:01
刘建洋任江苏省委组织部部长

刘建洋任江苏省委组织部部长

界面新闻
2024-03-29 17:13:10
朝鲜战争中,美国本有一次战胜中国的机会,却遇到玩命的中国师长

朝鲜战争中,美国本有一次战胜中国的机会,却遇到玩命的中国师长

青青河边
2024-03-27 11:41:06
又亏207亿,累计亏损860亿!卖40万一辆的蔚来汽车,还能撑多久?

又亏207亿,累计亏损860亿!卖40万一辆的蔚来汽车,还能撑多久?

李砍柴
2024-03-28 20:45:51
汪小菲晒钻戒宣布求婚成功:送女友Mandy价值百万的豪车

汪小菲晒钻戒宣布求婚成功:送女友Mandy价值百万的豪车

素素娱乐
2024-03-28 22:15:19
昨天,江苏最大项目在苏州!

昨天,江苏最大项目在苏州!

妮子说美食
2024-03-29 16:52:08
杰士邦赞助三镇引热议?东体:低谷时能掏钱已是莫大“功德”

杰士邦赞助三镇引热议?东体:低谷时能掏钱已是莫大“功德”

懂球帝
2024-03-29 11:46:09
曝4月之后所有手机厂商都会支持5.5G 且不需要换硬件

曝4月之后所有手机厂商都会支持5.5G 且不需要换硬件

手机中国
2024-03-28 16:48:09
现在是3月29号夜晚,突然传来1个重要消息,下周一要来大动作吗?

现在是3月29号夜晚,突然传来1个重要消息,下周一要来大动作吗?

股市皆大事
2024-03-29 18:00:55
2024-03-29 21:56:49
linux运维菜
linux运维菜
喜欢使用Linux!
412文章数 4575关注度
往期回顾 全部

科技要闻

雷军:我们是卷王,建议BBA车主感受下时代

头条要闻

美"双头姐妹"之一已婚 丈夫带8岁女儿加入"重建家庭"

头条要闻

美"双头姐妹"之一已婚 丈夫带8岁女儿加入"重建家庭"

体育要闻

足坛反腐涉案金额:6人超千万李铁1.2亿

娱乐要闻

胡夏被曝有孩子!工作室火速辟谣

财经要闻

张维迎:如何正确理解企业家精神?

汽车要闻

找回久违的开怀大笑 试驾小米SU7 Max

态度原创

旅游
本地
手机
亲子
军事航空

旅游要闻

赏花不止于“春” 农文旅融合助力乡村

本地新闻

专访|张伟潮:最年轻的龙头专职制造者

手机要闻

全套深度定制配件!红魔9 Pro+大黄蜂限量典藏套装发布:6499元

亲子要闻

是不是每个男人都有一个女儿梦 女儿奴

军事要闻

乌方声称击落两枚俄"锆石"高超音速导弹 俄方未予回应

无障碍浏览 进入关怀版