GreatSQL回放性能提升

yejr · 2023-10-18 10:27:05

转自研发同学： handle_slave_sql还是单线程，瓶颈在于 handle_slave_sql里面的操作，具体执行回放工作的是handle_slave_worker。至于采用staged架构，是根据微软论文来做的。

jzyhywxz · 2023-10-18 11:14:18

本帖最后由 jzyhywxz 于 2023-10-18 11:29 编辑

yejr 发表于 2023-10-18 10:27
转自研发同学： handle_slave_sql还是单线程，瓶颈在于 handle_slave_sql里面的操作，具体执行回放工作的是 ...

感谢！具体是哪篇微软论文可以发下title或链接吗？

wangbin579 · 2023-10-18 18:33:58

jzyhywxz 发表于 2023-10-18 11:14
感谢！具体是哪篇微软论文可以发下title或链接吗？

里面的很多思路来自于Closing the Parallelism Gap in Database Replication。
不过目前开源版本还没有合并进来。

wangbin579 · 2023-10-18 18:35:28

本质上handle slave sql只有单个线程在工作，是回放的主要瓶颈，里面的解析部分工作量巨大，一个线程是远远不够的

jzyhywxz · 2023-10-19 10:19:33

wangbin579 发表于 2023-10-18 18:33
里面的很多思路来自于Closing the Parallelism Gap in Database Replication。
不过目前开源版本还没有合 ...

非常感谢！我来拜读一下~

jzyhywxz · 2023-10-19 10:23:08

wangbin579 发表于 2023-10-18 18:35
本质上handle slave sql只有单个线程在工作，是回放的主要瓶颈，里面的解析部分工作量巨大，一个线程是远远 ...

非常感谢！我看了下MySQL官方的WorkLog，里面有些对slave coordinator性能瓶颈的描述，包括若当前没有空闲的slave worker则slave coordinator等待，等等。具体有哪些瓶颈最好能总结出来列个表，这样可以逐个对照着讨论。

[已解决] GreatSQL回放性能提升