SecFusionAgent Technical Design 1: Data Plane

SecFusionAgent Technical Design 1: Data Plane 由 Archify 生成的架构图。 外部情报来源 · 漏洞 · 仓库 · 论文 · 事件 · 外部来源 · 外部权威来源 外部情报来源 漏洞 · 仓库 · 论文 · 事件 外部权威来源 采集运行时 · 定时任务 · 运行状态 · SecFusionAgent 数据平面 · 定时 + 按需 采集运行时 定时任务 · 运行状态 定时 + 按需 来源适配器 · 发现 · 抓取 · 查询 · SecFusionAgent 数据平面 · 数据源协议 来源适配器 发现 · 抓取 · 查询 数据源协议 留存路由 · 按数据类型分流 · SecFusionAgent 数据平面 · 四类留存策略 留存路由 按数据类型分流 四类留存策略 漏洞热工作集 · Redis · 当前漏洞 · SecFusionAgent 数据平面 · 高频更新 漏洞热工作集 Redis · 当前漏洞 高频更新 事件信号暂存 · Redis · 信号 / 候选 · SecFusionAgent 数据平面 · 事件信号 事件信号暂存 Redis · 信号 / 候选 事件信号 研究内容归档 · 版本 · 正文切块 · SecFusionAgent 数据平面 · 长期归档 研究内容归档 版本 · 正文切块 长期归档 重点仓库索引 · 仓库 · 对象 · 字段 · SecFusionAgent 数据平面 · 选择性索引 重点仓库索引 仓库 · 对象 · 字段 选择性索引 证据边界 · 来源观察 · 证据链接 · SecFusionAgent 数据平面 · 固定来源版本 证据边界 来源观察 · 证据链接 固定来源版本 原始文件存储 · S3 / MinIO · SecFusionAgent 数据平面 · 原始数据 原始文件存储 S3 / MinIO 原始数据 长期规范状态 · PostgreSQL · SecFusionAgent 数据平面 · 知识 · 事件 · 事务消息 长期规范状态 PostgreSQL 知识 · 事件 · 事务消息 异步处理 · Celery · 消费任务 · SecFusionAgent 数据平面 · 富化 · 投影 · 索引 异步处理 Celery · 消费任务 富化 · 投影 · 索引 外部来源 SecFusionAgent 数据平面 图例 后端 数据库 云服务 安全 消息总线 外部系统

权威来源与存储语义

  • • 外部数据源负责当前外部记录;PostgreSQL 负责 SecFusionAgent 的长期状态
  • • Redis 只承担热工作集和事件暂存;缓存淘汰不会改变长期结论
  • • 当前视图与检索索引属于可重建的派生状态

四类数据路径

  • • 高频漏洞先进入有界工作集,满足长期保存条件后再固定证据
  • • 事件信号短期聚类,官方确认、直接证据或独立互证满足条件后长期保存
  • • 研究正文和重点仓库快照直接固定来源版本,再进入长期处理

失败、重放与异步闭环

  • • 当前批次完整处理后才推进游标;失败记录保留原位置并支持重放
  • • 长期状态与事务性消息一并提交,异步任务按版本和幂等键重放
  • • 外部富化查询重新进入采集和证据边界,不建立来源追溯旁路