Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

perf: 事件处理中发现last_time不变的数据时再次查询CMDB实时数据进行更新 #2310

Closed
jsonwan opened this issue Aug 4, 2023 · 0 comments
Assignees
Labels
done 已上线到正式环境并验收通过 kind/enhancement 功能改进特性
Milestone

Comments

@jsonwan
Copy link
Collaborator

jsonwan commented Aug 4, 2023

事件数据中的last_time不准确,导致主机变动信息没能及时更新到Job的缓存数据中,导致IP选择器无法选择受影响的主机,小概率出现。

经排查,last_time不准确(主机数据变了但last_time没变)的原因:

  1. CMDB存在一些存量的老代码接口,更新主机/主机关系数据时没有对应地更新last_time字段;
  2. 数据精度问题,当前last_time的精度为ms,可能出现1ms内主机数据连续更新多次,但这种情况比较少见。

处理措施:
CMDB:根据这次发现的问题,修复对应接口的last_time更新,一步步消除历史债务;
Job:增加兜底策略,在事件处理机制中发现last_time相同的数据时,再从CMDB查询实时数据,用实时数据进行更新。

@jsonwan jsonwan added kind/enhancement 功能改进特性 backlog 需求初始状态,等待产品进行评估 labels Aug 4, 2023
@nekzhang nekzhang added this to the V3.8.6 milestone Dec 11, 2023
@jsonwan jsonwan self-assigned this Dec 13, 2023
@jsonwan jsonwan added todo 进入开发排期的状态,纳入了最近的迭代 doing 已经接受处理,正在开发实施 labels Dec 13, 2023
wangyu096 added a commit that referenced this issue Dec 13, 2023
perf: 事件处理中发现last_time不变的数据时再次查询CMDB实时数据进行更新 #2310
@bkjob-bot bkjob-bot added for test 可以在测试环境进行验收 and removed backlog 需求初始状态,等待产品进行评估 todo 进入开发排期的状态,纳入了最近的迭代 doing 已经接受处理,正在开发实施 labels Dec 20, 2023
@bkjob-bot bkjob-bot added for gray 可以在灰度环境/预发布环境验收 done 已上线到正式环境并验收通过 and removed for test 可以在测试环境进行验收 for gray 可以在灰度环境/预发布环境验收 labels Dec 28, 2023
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
done 已上线到正式环境并验收通过 kind/enhancement 功能改进特性
Projects
None yet
Development

No branches or pull requests

3 participants