日志问题，wal的日志和rocksDB里面的raft日志的区别与作用

懒云一笑 · 2024 年9 月 3 日 08:44

为什么要两个日志？分别的作用是什么？具体怎么看到？

MrSylar · 2024 年9 月 3 日 08:55

作用不同。wal 是保证数据持久化的，常见的数据库都有这个行为，它可以把数据的随机写入转为顺序写入，缩短提交时间。raft 日志是为了数据一致性，从 raft leader 发送到 follower 节点的“消息”。

zhanggame1 · 2024 年9 月 3 日 09:00

现在的版本raft默认使用raft-engine了，分布式数据一致性，wal日志是rocksDB的日志

TiDBer_xTvoCh2f · 2024 年9 月 3 日 09:41

和mysql类似吧，控制好redo，undo，其实可以去掉binlog

懒云一笑 · 2024 年9 月 4 日 00:39

麻烦再问一下，wal日志能用作数据恢复吗？ raft只是为了数据同步吗？相比直接apply，好处是什么啊？raft日志也能用作数据恢复吗？

MrSylar · 2024 年9 月 4 日 01:01

wal日志能用作数据恢复吗

数据库崩溃，启动后会自己应用，类比 oracle shutdown abort 后的启动过程

raft只是为了数据同步吗
raft 本身是一种数据一致性算法，建议 google 下可以更有助于理解

懒云一笑 · 2024 年9 月 4 日 01:17

非常感谢，另外，不好意思，不是问raft只是为了同步，是问raft日志，然后raft日志也能用作恢复吗？会永久存在rocksDB里面吗？

zhanggame1 · 2024 年9 月 4 日 01:32

日志都是本地硬盘里面单独放得，你装好tidb到安装目录看就能看到了

TiDBer_QKDdYGfz · 2024 年9 月 4 日 01:47

我理解raft是为了保持多个节点数据一致性的，很可能机器掉电的时候wal写了，raft log还没写，还是要通过wal恢复

懒云一笑 · 2024 年9 月 4 日 02:25

这个log？
还是

raftlog 是存在 sst文件里，还是这个log里？

hzc989 · 2024 年9 月 4 日 03:00

WAL 是用于数据持久化，raft log 是 raft 协议，数据副本同步同步使用。我个人日常运维的问题排查都比较少接触这俩日志，不过 rocksdb.info 这个文件倒可能会检视一下，如果要类比，就有点类似 show Innodb engine status 里面的引擎状态信息、各个分层数据信息