跳转到主要内容
版本要求:告警聚合的可选方式随订阅版本变化——不聚合 所有版本可用,规则聚合 需 On-call 标准版及以上,智能聚合 需 On-call 专业版(私有化部署默认可选)。风暴预警和抑制策略需要 On-call 标准版及以上订阅,静默策略在所有版本中可用。了解更多
告警降噪是 Flashduty On-call 的核心能力之一,当告警风暴来袭时,您可能会收到数百条相似通知。降噪功能将这些告警聚合为一条故障,让您只需处理一次,而非被重复通知淹没。

为什么需要降噪

核心概念

理解降噪前,需要先了解三个核心对象的关系:
关键理解:
  • 一条告警可以包含多个事件(同一 alert_key 在「事件聚合」窗口内触发的多次事件,以及对应的恢复事件)
  • 一条故障可以包含多条告警(相似告警被聚合到一起)
  • 降噪发生在两个环节:「事件 → 告警」由协作空间的 事件聚合 控制;「告警 → 故障」由 告警聚合 控制

降噪过程

当监控系统推送告警到 Flashduty On-call 时,系统会自动执行以下流程:
1

接收事件

判断是否合入已有告警,否则创建新告警。
2

处理新告警

判断是否合入已有故障,否则创建新故障。
3

触发通知

新故障按分派策略通知相关人员。
4

后续告警合入

后续告警合入已有故障,不再重复通知。
告警降噪流程图

让 AI 帮您配置降噪

告警聚合 与 抖动检测 的页头右侧各有一个 让 AI 帮我配置降噪 按钮。点击后会在右侧打开 AI SRE 面板,把该协作空间作为上下文引用带入会话,并按您所在的页面预填一条请求: /channel-noise 是对应的内置 Skill,只从这个入口进入,一次只调一个协作空间。预填的请求可以直接发送,也可以在发送前改写,例如限定回看的时间范围,或说明必须保留哪些聚合维度;发送后仍可继续用自然语言追问或调整要求。
前提:账户已启用 AI SRE,且您有使用 AI SRE 对话的权限。不满足任一条件时,该按钮不显示。
Agent 会读取该协作空间最近的告警(回看范围可以调整,最长 30 天)并给出推荐值;在告警聚合页,还会按页面的聚合预览给出预计的故障数量。改动不会直接落库:您可以检查它填入表单的推荐值后点 保存,也可以让它直接保存,此时会先弹出一张确认卡片,逐条列出变更前后的值(如「聚合维度:labels.check → labels.check + labels.service」),确认后才写入并立即生效。 /channel-noise 只修改 告警聚合 与 抖动检测 两项配置;事件聚合、静默策略、抑制策略和排除规则它只给建议并指出对应的配置页面,不写入。引用标签如何随消息发送、会话如何管理,见 控制台对话。

事件聚合

进入 协作空间详情 → 配置 → 降噪处理 → 事件聚合 进行配置。 事件聚合控制「事件 → 告警」的合并行为:当上游监控系统持续推送相同 alert_key 的事件时,是否将这些事件合入同一条已有告警,还是为每个事件创建独立的告警。 事件进入已有告警需要同时满足以下四个条件,缺少任意一个都会创建新告警:
  • 同一协作空间:事件与目标告警属于同一个协作空间
  • alert_key 相同:事件描述的是同一个告警生命周期
  • 目标告警仍活跃:已恢复或已结束的告警不会继续接收事件
  • 仍在聚合窗口内:超过窗口后,即使 alert_key 相同也会创建新告警
新建协作空间默认开启事件聚合,聚合窗口为 24 小时(1440 分钟)。

配置项

alert_key 是用于告警关联和去重的标识字段,由上游集成上报或由集成规则自动生成。

与告警聚合的区别

告警聚合

进入 协作空间详情 → 配置 → 降噪处理 → 告警聚合 进行配置。 告警聚合将多条相似告警合并为一条故障,统一分派和通知。当告警风暴来袭时,您只需处理一条故障,而非数百条重复通知。
新建协作空间的聚合方式由订阅版本推导,创建向导的 告警聚合 步骤会按版本预选,卡片右上角带 默认 标记,保存空间时即写入该配置:免费版默认 不聚合,标准版默认 规则聚合(默认聚合字段 labels.check),专业版与私有化部署默认 智能聚合(默认参与判断的字段为 title、description、labels.service、labels.resource)。默认配置下聚合窗口为 持续到故障关闭、风暴预警 关闭(开启后默认阈值 100)、严格聚合 关闭。您可以在向导里改选其他可用方式,也可以在空间创建后进入 降噪处理 → 告警聚合 调整,向导步骤见 创建空间。

聚合模式

告警聚合页面提供三种互斥的方式,选择后需要保存才生效: 不可用的方式在创建向导里显示为置灰不可选,悬停提示「当前订阅暂不支持该聚合方式」。方式对应 API 字段 group_method 的枚举值:i(智能聚合)、p(规则聚合)、n(不聚合),详见 故障 Webhook。 点击另一张方式卡片,页面下方直接显示该方式需要的配置项(不再弹出确认框),切换前已填写的草稿会保留;点击 保存 才生效。

通用配置

当新告警与活跃故障的内容高度相似时,自动合入故障。系统基于机器学习计算告警之间的语义相似度,无需手动定义聚合规则。
1

选择聚合模式

在页面顶部的 聚合方式 卡片中选择 智能聚合(标准版下该卡片置灰不可选,需专业版及以上)
2

指定参与判断的信息

展开 高级设置(说明为「参与判断的信息和风暴提醒」),在 参与判断的信息 中选择用于比较相似度的字段。默认字段包括:标题(title)、描述(description)、labels.service、labels.resource。您可以根据业务需要添加或移除字段,最多支持选择 10 个 字段。点击 重置 可恢复默认配置。
系统将根据所选字段的内容计算告警之间的相似程度,当相似度达到阈值时,新告警将自动合入已有故障。
智能聚合配置

智能聚合配置

预览规则聚合效果

选择 规则聚合 并填写配置后,点击底部 预览,可查看当前草稿对近期告警样本的聚合结果,包括事件数、告警数、故障数及各故障关联的告警。预览不会保存配置;确认效果后,点击 保存 才会应用规则。

配置限制

聚合配置有以下数量上限:

聚合效果

设置按 告警检查项 聚合后,5 个事件归入 3 条告警,3 条告警被聚合为 1 个故障:
下面是另一组故障详情示例。您可以在详情页查看聚合关系:
  • 点击告警标题,查看告警时间线和关联事件
  • 点击事件点,查看事件上报的具体内容
聚合效果

聚合效果展示

抖动检测

当同一故障频繁触发与恢复时,系统将其标记为”抖动”状态,避免通知轰炸。 进入 协作空间详情 → 配置 → 降噪处理 → 抖动检测:
新建协作空间默认开启抖动检测,模式为 仅提醒:识别到抖动后提醒一次,后续故障仍按原策略通知,默认参数为观测窗口 60 分钟、状态变化 4 次。静默时长 只在 提醒后静默 模式下生效,默认 120 分钟;把模式切换为 提醒后静默 时,系统会把静默时长按 120 分钟预填。
抖动检测模式

可配置参数

什么算同一故障:Flashduty 取每个故障关联的 首条告警 的 alert_key 作为抖动检测标识;两个故障的该标识相同,才会在观测窗口内按同一问题统计。这里的判断 不使用 告警聚合页面配置的聚合维度。alert_key 由告警集成上报或按该集成的规则自动生成,不同集成的生成方式可能不同,不能在本页面修改。页面顶部的 当前效果 卡片会用一句话说明当前模式的效果(如「仅提醒 · 识别抖动后提醒一次」)。

静默策略

在维护窗口或已知问题期间,静默规则可以屏蔽特定条件的告警通知。 进入 协作空间详情 → 配置 → 降噪处理 → 静默策略。 列表上方的 搜索名称或描述 搜索框按策略名称和描述模糊过滤当前列表(不区分大小写,不匹配条件里的值),没有匹配项时显示 没有匹配的结果。

静默时间

单次静默的时间输入:左侧为持续时长输入框(默认 1d),右侧为绝对时间范围选择器,两者联动生效:
  • 持续时长支持 30m、1h、12h、1d、1w、2w 等简写;修改时长会以当前时间为起点重新计算结束时间
  • 也可直接在右侧时间范围选择器中指定起止时间,左侧时长会同步刷新
  • 开始时间必须早于结束时间,且不能为空
到期后自动删除:单次静默规则可开启该开关,开启后规则在结束时间过后 24 小时由系统自动清理,与 快速静默 的清理行为保持一致;关闭时(默认)规则到期后仍保留在列表中,但不再生效,可手动复用或删除。

静默条件

定义哪些告警需要被静默,支持多条件组合。 组合逻辑:
  • AND:所有条件同时满足才静默
  • OR:任一条件满足即静默
详见 配置过滤条件。

静默行为

下次创建静默规则时,会沿用您上一次选择的静默行为作为默认值。

快速静默

基于已发生的故障快速创建临时静默规则。 操作路径:故障详情 → 更多操作 → 快速静默
  • 规则名称默认为「快速静默 - #短标识」,描述中包含故障标题
  • 生效范围为故障所属协作空间(不可更改)
  • 默认选择 单次静默,生效 1 天。您可以在左侧持续时间输入框中填写自定义时长(支持 30m、1h、12h、1d、1w、2w 等写法),或在右侧时间范围选择器中指定绝对的起止时间;单次静默到期后规则自动删除
  • 也可以选择 周期静默,按标准的周期时间配置设置静默时段
  • 条件默认为故障严重程度和筛选后的标签匹配。标签会自动排除两类:系统格式规则(标签值属于 JSON 类型、纯数字、时间格式或内容过长)和账户排除规则(全局排除与按集成排除的标签,配置见 快速静默标签排除规则)
快速静默

快速静默配置

创建时会列出被自动排除的标签及原因。账户排除规则只有主账户或账户管理员可以修改。匹配条件由来源故障的标签自动生成,过于精确可能导致同类告警无法被静默,请逐条确认。
同一故障重复操作快速静默时,会编辑原规则而非创建新规则。

复制静默策略

静默策略以表格列出,点击某一行可展开查看规则详情。在列表中点击目标规则右侧的 更多操作(⋯)→ 复制(快速静默 生成的规则没有这一项),可以设置新规则的名称、描述和目标协作空间: 复制生成 一条独立的新规则,沿用原规则的静默条件、静默行为、到期自动删除设置和静默时间,但不再与来源故障关联。复制到其他协作空间后,可以点击 去查看 打开新规则。

抑制策略

当根因告警存在时,自动抑制相关的次要告警。例如:Critical 级别故障存在时,抑制同一检查项的 Warning/Info 级别故障。

配置路径

抑制策略列表上方的 搜索名称或描述 搜索框按策略名称和描述模糊过滤当前列表(不区分大小写,不匹配条件里的值),没有匹配项时显示 没有匹配的结果。

抑制条件

当新告警满足条件,且 10 分钟内存在满足条件的 活跃告警(处于活跃状态、未恢复的告警即可作为抑制源,无论是否已被认领),且两者存在相同项时,新告警被抑制。

抑制行为

配置示例

场景:当存在 Critical 级别告警时,抑制同一检查项的 Warning/Info 级别告警。

常见问题

不会。故障标题与触发该故障的第一条告警相同,可随时手动修改,不会随新告警变化。
  • 手工创建的故障:不会,标签列表永远为空
  • 自动触发的故障:有可能,故障标签与第一条告警保持一致,如果该告警标签变化,故障标签也会同步更新
会。告警标签总是与最新合入的事件保持一致。但如果新事件是恢复事件,告警将保持已有标签不变,仅增加之前不存在的标签。
上限约 5000 条。
事件能否合入已有告警,由协作空间的 事件聚合 设置决定(控制「事件 → 告警」层级,默认开启、窗口 24 小时,可关闭或自定义为 1–1440 分钟,开通扩展后可达 7 天):
  • 事件聚合开启:相同 alert_key 的事件在窗口内合入同一条告警;超出窗口后到达的事件将创建新告警
  • 事件聚合关闭:每一条事件都会创建独立的告警,不再合并
请注意,告警聚合 控制的是「告警 → 故障」层级的合并窗口(默认最大 24 小时,可扩展至 30 天),与事件能否合入告警是两件事,不要混淆。

延伸阅读

配置分派策略

定义告警通知和升级规则

配置过滤条件

了解条件匹配语法