已合并
【bugfix】优化增量迁移性能 #170
lvlintao666创建于 2023年9月18日
【bugfix】优化增量迁移性能 #170
已合并
lvlintao666创建于 2023年9月18日
refs/pull/170/head合入到master
lvlintao666
lvlintao666成员
2023年9月18日

【标题】(请简要描述下实现的内容)

【实现内容】:修复增量迁移增加断点续传功能后性能达不到3wtps

【根因分析】:在发送断点消息到kafka时,性能影响较大

【实现方案】: 在发送断点消息到kafka时,虽改为异步发送,但是在发送时对某批次数据返回值逐一进行检查,对性能影响很大,优化这部分逻辑

【关联需求或issue】:https://gitee.com/opengauss/debezium/issues/I7Z283

【开发自验报告】:

  1. 请附上自验结果(内容或者截图)
    在IUD混合场景下,性能达到3wtps
    输入图片说明
  2. 是否可以添加fastcheck测试用例,如是,请补充fastcheck用例
  3. 是否涉及资料修改,如是,在docs仓库补充资料
  4. 是否考虑支撑升级和在线扩容等扩展场景
  5. 是否考虑异常场景/并发场景/前向兼容/性能场景
  6. 是否对其他模块产生影响

【其他说明】:

likedislike
Pull Request已成功合入, 合并人@
(感谢 lvlintao666 的贡献)
lvlintao666lvlintao666成员
2023年9月18日 指派了测试人opengauss-bot
lvlintao666lvlintao666成员
2023年9月18日 指派了 opengauss-bot 参与评审
opengauss_bot
opengauss_bot成员
2023年9月18日 评论:

Hey @lvlintao666, Welcome to openGauss Community.
All of the projects in openGauss Community are maintained by @opengauss_bot.
That means the developers can comment below every pull request or issue to trigger Bot Commands.
Please follow instructions at Here to find the details.

likedislike
opengauss_botopengauss_bot成员
2023年9月18日 添加了   sig/tools 标签
opengauss_botopengauss_bot成员
2023年9月18日 添加了   opengauss-cla/yes 标签
opengauss_bot
opengauss_bot成员
2023年9月18日 评论:

Hi @lvlintao666,
if you want to get quick review about your pull request, please contact the owner in first: @ywzq1161327784 ,
and then any of the maintainers: @xiong_xjun
and then any of the committers: @ywzq1161327784 , @woqutech_0 , @wmy_ld , @justbk , @totaj , @he-chenghan
if you have any question, please contact the SIG: Tools.

likedislike
opengauss_botopengauss_bot成员
2023年9月18日 添加了   codecheck-running 标签
opengauss-bot
opengauss-bot成员
2023年9月18日 评论:

静态检查

Check Name Build Details Check Result Check Detail
CodeCheck #13982 ✅ 通过 >>>
likedislike
opengauss_botopengauss_bot成员
2023年9月18日 添加了   codecheck-success 标签
opengauss_botopengauss_bot成员
2023年9月18日 移除了   codecheck-running 标签
lvlintao666lvlintao666成员
2023年9月18日 更新了说明
lvlintao666lvlintao666成员
2023年9月18日 更新了说明
ywzq1161327784
ywzq1161327784成员
2023年9月20日 评论:

/lgtm
/approve

likedislike
opengauss_botopengauss_bot成员
2023年9月20日 添加了   lgtm-ywzq1161327784 标签
opengauss_botopengauss_bot成员
2023年9月20日 添加了   approved 标签
hwhbj
hwhbj
2023年9月20日 评论:

/lgtm

likedislike
opengauss_botopengauss_bot成员
2023年9月20日 添加了   lgtm-hwhbj 标签
opengauss_botopengauss_bot成员
2023年9月20日 合并了Pull Request(通过 API 合并)