Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

线上tendisplus集群fail未找到原因 #89

Open
zhaochunxue opened this issue Apr 1, 2021 · 6 comments
Open

线上tendisplus集群fail未找到原因 #89

zhaochunxue opened this issue Apr 1, 2021 · 6 comments

Comments

@zhaochunxue
Copy link

我们线上集群,运行没有几天,集群就fail了,还希望帮忙看一下原因,下边是三个主节点的日志,在集群fail状态之前没有看到异常日志
主1
image
主2
image
主3
image
上边日志显示是发生了两此集群fail,主2和主3都发生了主从切换,还请帮忙分析一下
@zhaochunxue
Copy link
Author

zhaochunxue commented Apr 1, 2021 •
edited
Loading

主三就是第一次的异常节点,但是该节点下的日志没有了,是重启之后日志就被清理了?重启也不准确,容器并没有重启的记录,应该是rocksdb重启了,这个日志不覆盖有地方可以设置吗?按理说这种日志不应该会被覆盖掉啊
image

@TendisDev
Copy link
Collaborator

你好，三个节点完整日志上传会更有助于分析
可以做一定的脱敏处理

@zhaochunxue zhaochunxue mentioned this issue Apr 1, 2021
Closed
@zhaochunxue
Copy link
Author

你好，三个节点完整日志上传会更有助于分析
可以做一定的脱敏处理
你看到我上边说的rocksdb中的日志没有了吗?这个是什么原因,有配置可配吗?我看了一圈配置也没找到

@zhaochunxue
Copy link
Author

你好，三个节点完整日志上传会更有助于分析
可以做一定的脱敏处理

你看到我上边说的rocksdb中的日志没有了吗?这个是什么原因,有配置可配吗?我看了一圈配置也没找到

@TendisDev
Copy link
Collaborator

你好，三个节点完整日志上传会更有助于分析
可以做一定的脱敏处理

你看到我上边说的rocksdb中的日志没有了吗?这个是什么原因,有配置可配吗?我看了一圈配置也没找到

rocksdb日志没有了，应该是因为原master被重置为slave，会执行了全量同步。原rocksdb的内容被清理了

@zhaochunxue
Copy link
Author

你好，三个节点完整日志上传会更有助于分析
可以做一定的脱敏处理

你看到我上边说的rocksdb中的日志没有了吗?这个是什么原因,有配置可配吗?我看了一圈配置也没找到

rocksdb日志没有了，应该是因为原master被重置为slave，会执行了全量同步。原rocksdb的内容被清理了

这个日志不应给被保留吗?有没有什么配置可以把日志保留下来,同步的话就同步数据就好了,为什么要清理原来的日志

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees
No one assigned
Labels
None yet
Projects
None yet
Milestone
No milestone
Development

No branches or pull requests
2 participants
@zhaochunxue @TendisDev