业务域:
Z 张明远 · 平台管理员
活跃智能体
24
↑ 3 较昨日
日任务量
1,283
↑ 12.5%
成功率
94.7%
↑ 0.3%
日均 Token 消耗
¥847
↓ 5.2% 较上周
⚡ 快速操作新手引导 · 一键直达核心功能
🤖
创建智能体
4种类型可选 · 一键创建+沙盒测试
📋
审批工作台
3项待审批 · HITL L3级审批入口
🔔
查看告警
2条严重告警 · 供应链延迟飙升
🎭
部署场景
6个预置场景模板 · 一键部署
🧠
配置路由
4个业务域路由 · Fallback链配置
业务域调用概览
业务域日调用成功率P99延迟日均Token状态
金融投研52396.2%1.2s¥312健康
智能客服41293.8%0.8s¥198健康
供应链34894.1%1.5s¥337注意
模型路由概览
模型路由占比平均延迟成功率日均调用
GPT-4o42%1.1s97.3%540
Claude-3.528%0.9s95.6%360
DeepSeek-V318%0.6s92.1%230
Qwen-72B12%0.5s89.8%153
最近告警
时间级别来源描述操作
10:23严重供应链-库存查询P99延迟飙升至 4.2s
09:47警告DeepSeek-V3成功率降至 88.3%
08:15提示Token 预算金融投研究域Token消耗接近月度预算80%
资源概览
CPU 使用率
62% · 8 核
内存使用
48% · 16GB / 32GB
Token 预余
已用 78% · ¥25,410 / ¥32,500
场景健康度
场景业务域成功率SLA达标日均调用状态操作
反洗钱调查助手风控96.2%99.5% ✓48健康
智能客服零售93.8%99.2% ✓412健康
供应链预警供应链94.1%99.0% ✓32注意
投研分析助手金融投研96.8%98.8% ⚠523SLA预警
运维巡检助手运营99.6%99.8% ✓120健康
本月成本与调用量趋势
Token成本 (万元)
10万 5万 0 7/1 7/2 7/3 7/5 7/6 7/7 7/8 7/10 ¥7.7万
日调用量
1500 800 0 7/1 7/2 7/3 7/5 7/6 7/7 7/8 7/10 1,283
模型成本占比
Qwen3-72B 35%
DeepSeek-V3 42%
GPT-4o 18%
其他 5%
月预算 ¥105万 · 已消耗73%
🚨 风控预警速览
可疑交易预警
今日新增 7 条可疑交易标记 · 已自动触发AML-Agent调查
3条高风险4条中风险
反洗钱调查进展
AML-Agent正在调查2项 · 1项已完成待合规官审批
2项进行中1项待审批
监管报送状态
本月监管报送 · 已完成2/4项 · 下周需提交银保监季度报告
2项已完成2项待提交
服务目录
录入注册
评审流水线
授权管理
使用申请
语义搜索支持自然语言描述工具能力,例如"能查询A股实时行情的MCP服务"。过滤条件可叠加使用。
MCP 服务目录 共 47 个已注册服务
服务名称版本语言协议安全级别数据分级业务域关联Agent状态操作
aml-investigate-serverv2.1.0 Pythonstdio L3 受控 D3 敏感 金融投研 已上线
realtime-stock-serverv1.3.2 TypeScriptSSE L2 内部 D2 内部 金融投研 已上线
email-sender-serverv1.0.4 Pythonstdio L2 内部 D2 内部 智能客服 已下线
supply-chain-trackerv3.0.1 GoHTTP L1 公开 D1 公开 供应链 已上线
knowledge-retrieverv1.2.0 Pythonstdio L2 内部 D2 内部 知识管理 评审中
录入新 MCP 服务后自动进入评审流水线。安全级别和数据分级需严格按照企业数据治理标准标注。
MCP 服务录入
stdio 协议无需填写端点,填"local"即可
🟢 L1 公开 无敏感数据
🔵 L2 内部 不含隐私
🔴 L3 受控 需审批授权
L1 公开级别: 无敏感数据操作,对外公开可用 · 无需安全评审报告 · 评审流水线3阶段(格式→功能→上线) · 限流默认不设 · 无组合黑名单要求
L2 内部级别: 仅企业内部使用,不含个人隐私 · 评审流水线4阶段(格式→安全→功能→上线) · 建议设限流60QPM · 组合黑名单可选 · 需注明内部用途
L2建议60QPM,防止资源滥用

🔴 L3 受控级别 — 高安全要求

含高度敏感数据,需审批授权。评审流水线6阶段(格式→安全→功能→合规→集成→上线审批),安全评审和合规评审为强制阻断关卡。

📄 必须提交安全评审报告(含漏洞扫描结果+PII处理声明+加密方案)
L3必须启用加密传输
L3强制30QPM,默认值不可超过60
信息安全部合规部
L3级别必须指定组合黑名单,防止与低安全级别服务组合导致数据泄露
强制 email-sender-server(可能触发外部邮件泄露敏感数据) ✕
强制 realtime-stock-server(可能泄露客户持仓与交易数据) ✕
强制启用 SHA-256不可篡改 · 每条调用记录永久留存 · 合规追溯3年 WORM
D3/D4 级数据必须启用加密传输和审计日志;安全级别与数据分级需匹配(L3→D3+, L2→D2+)
investigate_company → 查询企业关联图谱 ✕
check_risk_score → 计算风险评分 ✕
指定不可与本服务同时挂载的 MCP 服务(防止冲突或数据泄露)。
email-sender-server(原因: 可能触发外部邮件泄露敏感数据) ✕
默认不限流,建议 L3 服务设为 60 QPM
所有新录入的 MCP 服务必须通过6阶段评审流水线方可上线。安全评审(L3+)和合规评审(D3+)为强制阻断关卡。
aml-investigate-server 评审中
提交于 2026-07-09 14:30
✓
格式校验
✓
安全评审
✓
功能验证
4
合规评审
5
集成测试
6
上线审批
✓
格式校验 — schema 合规,字段完整
2min
✓
安全评审 — L3 受控级别已提交安全报告,漏洞扫描通过
15min
✓
功能验证 — 2 个工具均可正常调用,响应延迟 <1s
8min
↻
合规评审 — D3 敏感数据分级审核,等待合规官确认
进行中…
—
集成测试 — 待前置评审通过
—
上线审批 — 待集成测试通过
进度: 3/6 阶段通过 · 预计剩余 2h
email-sender-server 评审失败
提交于 2026-07-08 09:15
✓
格式校验
✕
安全评审
3
功能验证
4
合规评审
5
集成测试
6
上线审批
✓
格式校验 — schema 合规
1min
✕
安全评审 — 未通过: 端点缺乏 TLS 加密,存在邮件内容泄露风险
12min
—
功能验证 — 阻断
—
合规评审 — 阻断
—
集成测试 — 阻断
—
上线审批 — 阻断
进度: 1/6 · 安全评审未通过,流水线已阻断
ACL 规则控制智能体对 MCP 服务工具的调用权限。规则按优先级从高到低匹配,建议显式定义 Deny 规则防范越权调用。
ACL 规则管理
优先级智能体MCP 服务工具动作条件操作
P1 aml-investigator aml-investigate-server investigate_company Allow 业务域=金融投研
P2 * email-sender-server send_email Deny 数据分级≥D3
P3 customer-service-bot realtime-stock-server get_stock_price Allow 限流 30 QPM
智能体挂载 MCP 服务前需提交使用申请,经服务 Owner 审批后方可生效。L3 服务需额外经安全官审批。
MCP 服务使用申请
investigate_company ✕
Skill 目录
创建 Skill
上传 Skill 包
分发 & 灰度
Skill 名称类型业务域版本依赖工具数日调用成功率人工介入状态
运维故障定位workflowLangGraph运营v2.1342396.2%12%active
智能客服supervisorLangGraph+A2A零售v1.852,10093.6%18%active
信贷审批辅助supervisorADK Java A2A对公v1.3818791.5%28%active
反洗钱调查supervisorADK Go A2A风控v0.9-beta12———pending_review
临时数据分析autonomousLangGraph跨域v1.5236193.6%18%active
监管报送workflown8n风控v1.06———draft
SkillHub(iflytek/skillhub) 能力: 多租户命名空间 · RBAC(Owner/Admin/Member+SUPER_ADMIN) · 双层审核(团队+平台) · 语义版本管理 · 审计日志 · API Token · 全文搜索 · CLI
我方定制(~15%): 三层治理审核前置(Spring Boot Filter) · Agent Runtime注册回调 · 安全评审流水线对接
创建 Skill · SKILL.md 定义Skill = 一份结构化 Markdown 文件,定义「何时触发→如何执行→输出什么」
📝 SKILL.md Frontmatter YAML元数据
以下字段对应 SKILL.md 的 YAML frontmatter 区,定义 Skill 的身份与分类
影响编排方式,但不再决定全部表单字段
🎯 触发条件 read_when
定义 Skill 在什么场景下被激活——可以是关键词、意图分类、业务事件或人工指定
意图分类触发
意图标签置信度阈值优先级说明
aml_investigate≥ 0.85P1反洗钱调查请求
suspicious_transaction≥ 0.80P2可疑交易告警触发
compliance_check≥ 0.75P3合规审查请求
意图分类由上游 Agent Router 完成 → 匹配意图+置信度≥阈值 → 自动激活本 Skill
⬇⬆ 输入输出 Schema input / output
定义 Skill 接收什么数据、输出什么格式——Agent Runtime 据此校验和路由
字段类型必填说明来源
customer_idstring必填客户唯一标识用户输入
transaction_idsstring[]必填可疑交易ID列表告警系统
investigation_typeenum可选调查类型: 重点/一般用户选择
contextobject可选上游对话上下文Agent传递
字段类型说明下游消费
risk_scorefloat(0-1)综合风险评分审批流路由
investigation_reportmarkdown调查报告全文HITL审批
evidence_chainobject[]证据链: [{交易,关联人,金额,原因}]合规存档
recommendationenum处置建议: 报告/冻结/上报调查员决策
hitl_requiredboolean是否需要人工审批审批引擎
📋 执行步骤 SKILL.md正文
Skill 的核心执行逻辑——按步骤定义推理→检索→判断→输出的完整流程,每步标注工具依赖和决策点
Step 1 客户画像构建
MCP query_customer_profile
调用 aml-investigate MCP → 获取客户基本信息、关联账户、历史交易模式 → 构建客户画像摘要(≤500token)
⏱ 超时5s · 🔄 重试2次 · 📊 数据分级 D3 → 必须精炼摘要模式
Step 2 交易链路分析
MCP analyze_transaction_chain
调用交易链路分析 MCP → 追踪资金流向、识别多层转账、发现异常模式 → 输出证据链 evidence_chain
⏱ 超时8s · 🔄 重试1次 · ⚠️ 金额>500万 → 自动升级到 L4 HITL
Step 3 案例比对 & 模式识别
KB 反洗钱案例库 + 监管规则库
检索反洗钱案例库(语义+KG) → 匹配相似案例 → 检索监管规则库 → 判断是否触发合规红线 → 输出相似度排名 + 规则命中列表
📚 RAGFlow 4通道召回 → bge-reranker → top-3 · KG权重0.2 · 语义0.4
Step 4 风险评估 & 三层治理过滤 决策点
Skill 合规审查Skill + 三层治理 Guard
综合画像+证据链+案例 → LLM生成风险评分(risk_score) → 三层治理三层过滤(合规红线/PII脱敏/事实校验) → 判断是否需要HITL
🛡 三层治理 D3级28条规则 · risk_score>0.7 → HITL L3合规官审批 · risk_score>0.9 → L4双人复核
Step 5 报告生成 & 输出
内置 format_output
将调查结论格式化为结构化报告 → 输出 investigation_report(markdown) + evidence_chain + recommendation + hitl_required
🔗 依赖资源 dependencies
Skill 执行所需的 MCP工具、知识库和其他Skill——部署前自动校验依赖完整性
🔌 MCP 工具 步骤中引用的工具必须在依赖中声明
所有工具调用必经MCP安全网关(认证/限流/6阶段评审/审计)
privileged query_customer_profile aml-investigate-server · D3 MCP → Step1 ✕
privileged analyze_transaction_chain aml-investigate-server · D3 MCP → Step2 ✕
standard kb-search knowledge-search-server · D2 MCP → Step3 ✕
📚 知识库 步骤中引用的KB必须在依赖中声明
KB 反洗钱案例库 1,240条 · v3.2 · KG+语义 RAGFlow → Step3 ✕
KB 监管规则库 856条 · v2.1 · 关键词+语义 RAGFlow → Step3 ✕
🧩 其他 Skill 可引用已上线Skill作为子步骤
Skill 合规审查Skill 三层治理 Guard · D3级 · 28条规则 → Step4 ✕
🛡 安全约束 constraints
定义 Skill 的安全边界——数据分级、HITL触发条件、输出过滤、审计要求
D3级 → PII声明必填 · WORM审计 · KB检索必须精炼摘要模式
触发条件HITL级别审批人
风险评分 > 0.7L3 审批型合规官
风险评分 > 0.9 或金额>500万L4 双人复核信贷经理+风险经理
三层治理拦截(合规红线命中)L4 双人复核合规总监+法务
三层治理三层过滤 ✓PII脱敏 ✓事实校验 ✓WORM审计 ✓
D3级强制: 合规红线→PII→事实 → 所有输出必经三层过滤方可返回
三级预算: 任务/用户日/业务域月
👁 SKILL.md 实时预览
---
title: "反洗钱调查助手"
summary: "反洗钱调查辅助,帮助调查员完成客户画像、交易链路分析、可疑模式识别和风险评估"
version: 0.9.0
execution_mode: supervisor
read_when:
  - intent: aml_investigate, confidence ≥ 0.85
  - intent: suspicious_transaction, confidence ≥ 0.80
input:
  customer_id: string (required)
  transaction_ids: string[] (required)
  investigation_type: enum (optional)
output:
  risk_score: float(0-1)
  investigation_report: markdown
  evidence_chain: object[]
dependencies:
  mcp: [aml-investigate, knowledge-search]
  kb: [反洗钱案例库, 监管规则库]
  skill: [合规审查Skill]
constraints:
  data_classification: confidential (D3)
  hitl_rules: [{risk_score>0.7 → L3}, {risk_score>0.9 → L4}]
  output_filter: [三层治理, PII脱敏, 事实校验, WORM]
  max_iterations: 15 | token_budget: 50000
---

## 执行步骤

### Step 1: 客户画像构建
调用 query_customer_profile → 获取客户基本信息 → 构建画像摘要(≤500token)

### Step 2: 交易链路分析
调用 analyze_transaction_chain → 追踪资金流向 → 输出证据链

### Step 3: 案例比对 & 模式识别
检索反洗钱案例库(语义+KG) + 监管规则库 → 匹配相似案例 → 规则命中列表

### Step 4: 风险评估 & 三层治理过滤 ⚡决策点
综合评分 → 三层治理三层过滤 → 判断HITL级别 → 输出risk_score

### Step 5: 报告生成 & 输出
格式化为 investigation_report + evidence_chain + recommendation
↑ 以上为根据表单实时生成的 SKILL.md 预览 · 也可直接编辑 Markdown 源码
上传 Skill 包
📦
拖拽 Skill 包到此处
.zip / .tar.gz 格式,含 skill.yaml + 源码/DSL
skill.yaml 规范示例
# skill.yaml — Skill包核心元数据 skill_id: aml-investigate-assistant name: 反洗钱调查助手 version: 0.9.0 execution: type: supervisor # workflow|supervisor|autonomous|mcp_auto max_iterations: 15 timeout_seconds: 300 required_tools: - aml-investigate-server/query_customer_profile - knowledge-search-server/kb-search knowledge_refs: - kb_id: aml-case-library; version: 3.2 remote_agents: - agent_id: aml-pattern-detector; language: go; bridge: a2a governance: data_classification: confidential security_level: privileged hitl_nodes: [report_generation]
智能客服 v1.8 → v1.9 灰度发布SkillHub版本管理
开发完成
→
内部测试
→
安全评审
→
灰度5%
→
灰度20%
→
灰度50%
→
全量发布
5%
成功率: 95.2%(↑1.6%) · 平均耗时: 7.8s(↓0.5s) · 转人工: 15%(↓3%)
灰度机制: 新版本按task_id哈希分配比例。灰度期间双版本并存,运行时抽象层按配置路由。一键回滚,业务零中断。
版本历史 SkillHub版本管理
版本发布时间灰度路径关键变更状态操作
v1.92026-07-09灰度5% → 观察中+多轮对话优化 · +FAQ缓存命中 · +免责声明自动追加灰度中
v1.82026-06-155% → 20% → 50% → 100%(全量)+RAGFlow 4通道检索 · +话术推荐 · +HITL L2确认全量
v1.72026-05-205% → 20% → 100%(全量)+DeepSeek-V3路由 · +FAQ直命中免LLM已废弃—
v1.52026-04-01直接全量(简单场景)初始版本 · 单轮对话 · Qwen3-72B已废弃—
智能体类型
创建智能体
编排画布
默认工具集
配置详情

🔄 Workflow 工作流型

固定DAG有向无环图,确定性最强
✓ 适合合规/审批/报送
✓ HITL节点嵌入审批
✓ 骨架静态+配置动态
✓ LangGraph StateGraph
典型场景: 监管报送、审批流程、运维故障定位(SOP)

🏗️ Supervisor 主管编排型

主管Agent分解任务,委派多个Worker
✓ 支持跨语言Worker(Go/Java A2A)
✓ Context Package精炼传递(降80% token)
✓ 熔断器+Schema验证+跨语言Trace
✓ LangGraph + ADK A2A
典型场景: 反洗钱调查、信贷审批、智能客服(路由)

🧠 General 通用智能体

单Agent自主决策,ReAct循环
✓ 自主选择工具和路径
✓ 轻量、快速迭代
✓ LangGraph ReAct Agent
典型场景: 临时数据分析、知识问答、FAQ客服

🤝 Multi-Agent-as-Tool

Agent-as-Tool模式,每个Agent可调用其他Agent
✓ Worker Agent注册为Tool
✓ 信任衰减: 3跳后阻断
✓ A2A RemoteAgentTool
典型场景: 全流程信贷审批、复杂反欺诈分析
选型决策树: 固定路径→Workflow | 多专家协作→Supervisor | 简单问答→General | 全流程→Multi-Agent-as-Tool
底层: 统一LangGraph编排,运行时抽象层 抽象层保证经典运行时 → 原生图运行时切换零感知
创建新智能体选择类型后,下方配置区将自动切换为对应的专属表单
🔄 Workflow
🏗️ Supervisor
🧠 General
🤝 Multi-Agent
vLLM
运行时抽象层
🔗 DAG 流程编排 LangGraph StateGraph
Workflow型以固定DAG路径执行,确定性最强。请按顺序定义节点,支持LLM/Tool/Condition/HITL四种节点类型。
节点序列定义
1意图识别→ 模型 Qwen3-7B
2故障分类→ 分支: 网络故障/应用故障/安全事件
3日志检索→ MCP: ops-log-search-server
4根因分析→ 模型 DeepSeek-R1
5人工确认 (HITL)→ interrupt_before 暂停,需审批员确认
6处置建议→ 模型 Qwen3-72B
⏸️ HITL 审批节点配置
Workflow型支持在DAG任意位置嵌入HITL暂停点,interrupt_before机制保证执行到此处暂停等待人工。
🛡️ 固定路径安全优势
Workflow型安全特性: ① 骨架静态编译→运行时不可篡改 ② 所有路径可枚举→合规审计友好 ③ HITL节点位置固定→审批节点不可绕过 ④ 节点配置动态加载(Postgres skill_node_config)→业务变更无需重编译
👷 Worker Agent 委派配置 LangGraph + ADK A2A
Supervisor型由主管Agent分解任务、委派Worker、汇聚结果。Worker可以是本地Python Agent或跨语言(Go/Java)A2A远程Agent。
Worker 委派列表
Worker A: 客户画像分析Python·本地
ID: customer-profile-worker · 语言: Python · 调用方式: 本地函数调用
挂载工具: query_customer_profile(MCP), kb_search(RAGFlow)
Worker B: 交易模式检测Go·A2A
ID: pattern-detector-worker · 语言: Go · 调用方式: A2A远程协议桥接
A2A端点: go-pattern-detector:8080 · 超时: 30s · 重试: 2次
Worker C: 风险评分计算Java·A2A
ID: risk-scoring-worker · 语言: Java · 调用方式: A2A远程协议桥接
A2A端点: java-risk-scoring:9090 · 超时: 15s · 重试: 1次
支持 Python(本地) · Go(A2A) · Java(A2A)
📦 Context Package 传递策略 降80% token
Supervisor向Worker传递精炼的Context Package而非全量对话,大幅降低token消耗和跨语言序列化开销。
Pydantic
🔄 熔断器 & 跨语言 Trace
Circuit Breaker
🧠 ReAct 循环配置 LangGraph ReAct Agent
General型单Agent自主决策,ReAct循环:Thought→Action→Observation→Thought…直到得出答案或达到边界。
防止无限循环
🛡️ 自主决策边界 Agent能自主做什么,什么必须人介入
决策项自主权限安全限制配置
知识检索自主相关性>0.7才注入,PII自动脱敏
工具调用(读)自主standard级工具可自主调用
工具调用(写)必须HITLprivileged/写入类需审批
数据输出受限Guard三层校验后才输出
跨域访问禁止运营域不可访问对公域数据
💡 General型适用场景
最适合: 临时数据分析、知识问答、FAQ客服、轻量级任务 · 不适合: 固定合规流程(用Workflow)、多专家协作(用Supervisor)、全流程(用Multi-Agent)
优势: 轻量快速迭代,单Agent最简单 · 风险: 自主决策边界需严格配置,否则可能越权
🤝 Agent-as-Tool 注册 A2A RemoteAgentTool
Multi-Agent型将每个Agent注册为Tool,主Agent可调用其他Agent。支持信任衰减机制,3跳后自动阻断。
已注册的 Agent-as-Tool
Agent注册为Tool名调用方式信任层级跳数操作
investigate_amlPython·本地L1 直接信任1跳
assess_creditPython·本地L1 直接信任1跳
check_complianceGo·A2AL2 间接信任2跳
🔒 信任衰减与阻断 核心安全机制
调用链每多1跳信任衰减一级,超过阈值自动阻断。防止Agent无限嵌套调用导致不可控。
主Agent→ 1跳aml-investigator→ 2跳compliance-checker→ 3跳🚫 阻断
Trust Decay
🔄 调用编排策略
编排引擎: LangGraph StateGraph统一编排,Agent-as-Tool通过A2ARemoteAgentTool注册 · 支持Python/Go/Java混合调用 · 每次调用携带W3C TraceContext实现跨语言链路追踪
知识库挂载 RAGFlow + Milvus
KB 反洗钱案例库 语义0.4+关键词0.3+结构0.2+KG0.1 RAGFlow
KB 监管规则库 语义0.6+关键词0.4 RAGFlow
MCP工具挂载 MCP 网关 + 安全网关
privileged query_customer_profile aml-investigate-server
standard kb-search knowledge-search-server
默认工具集 自动注入
⏰ get_current_time🧮 calculator📄 file_reader💻 code_sandbox 自托管沙箱🔍 kb_search📝 format_output📊 chart_generator
默认工具说明: get_current_time(时间) · calculator(计算) · file_reader(读取上传文件) · code_sandbox(自托管沙箱执行,deny-all egress) · kb_search(关联已挂载KB) · format_output(格式化) · chart_generator(图表)
自动注入,无需手动挂载。
Workflow型 — 运维故障定位 DAG
LLM
意图识别
Qwen3-7B
Condition
故障分类
Tool
日志检索
LLM
根因分析
DeepSeek-R1
HITL L3
人工确认
LLM
处置建议
Graph骨架: 静态编译(节点类型/边代码定义) + 节点配置: 动态加载(Postgres skill_node_config表) · LangGraph StateGraph · checkpointer存PG · interrupt_before实现HITL暂停
Supervisor型 — 反洗钱调查 多Agent编排
Supervisor Agent (Python)
任务分解→委派→汇聚→判断
Worker A: 客户画像
Python · 本地调用
Worker B: 模式检测
Go · A2A桥接
Worker C: 风险评估
Java · A2A桥接
Agent-as-Tool: Worker通过A2ARemoteAgentTool暴露为Supervisor可调用工具 · 信任衰减:最多3跳,超过自动阻断
所有智能体自动获得的7个基础工具
工具功能安全级别执行环境说明来源
get_current_time获取当前时间standard本地函数ISO8601时间戳内置
calculator数学计算standard本地函数基础运算、百分比、日期计算内置
file_reader文件读取restricted沙箱自托管沙箱CSV/PDF/Excel/图片,脱敏后返回
code_sandbox代码执行restricted沙箱自托管沙箱Python/Shell,deny-all egress
kb_search知识库检索standardRAGFlowRAGFlow自动检索已挂载KB,4通道+重排+Guard
format_output格式化输出standard本地函数表格/列表/Markdown内置
chart_generator图表生成standard沙箱自托管沙箱ECharts/Matplotlib图表
注入机制: 默认工具通过SkillDefinition.required_tools自动注入,Agent Runtime启动时从MCPHub获取endpoint
kb_search: 自动关联已挂载KB,Guard三层校验后才注入上下文
运维故障定位 · 配置详情
ops-fault-diagnosis
Workflow LangGraph
classic→native_graph 运行时抽象层
Guard 三层治理 三层治理
层规则执行触发
Constitutiondeny-all egresshard 阻断所有沙箱出站
Constitution特权操作必须HITLhard 阻断写入/删除类工具
Guidance运营域不可访问对公域数据hard 阻断跨域工具调用
Guidanceconfidential数据需审计soft 告警访问机密级数据
Context相关性>0.7才注入soft 过滤知识检索结果
ContextPII检测后脱敏hard 阻断所有外部数据
知识库列表
创建知识库
文档摄入
FAQ 管理
版本 & 时效
知识库类型业务域数据分级文档数chunk数支持格式召回率版本状态操作
反洗钱案例库案例库风控D3 受限3241,240PDF,Word,Excel85%v3.2active
监管规则库制度库风控D3 受限156856PDF,Word82%v2.1active
运维知识库技术文档运营D2 内部210980PDF,Wiki,Markdown78%v1.5active
客服FAQ库FAQ零售D2 内部—2,400FAQ对,Excel92%v4.0active
产品手册库多模态零售D1 公开45320PDF,图片,表格76%v1.0building
支持格式: PDF(含扫描件OCR) · Word · Excel · CSV · 图片(OCR+描述) · 企业Wiki(iWiki对接) · Markdown · HTML · 数据库(结构化导入) · 多模态(图文混合,DeepDoc版面分析)
📜 制度规范
📋 案例库
📖 技术文档
❓ FAQ
🖼️ 多模态
📜 制度规范型专属配置
法规类必须用生效日期管控,检索只返回 active 且 effective_date ≤ today 的chunk
kb_version_diff 自动对比新旧版本差异(新增/修改/废止条款)
制度规范库通常为D3及以上级别
强制启用 每次检索记录 SHA-256不可篡改
制度规范检索权重: 语义0.2 + 关键词0.4 + 结构化0.3 + KG0.1 — 法规名称和条款编号是关键检索信号
📋 案例库型专属配置
标注维度标签集用途
风险等级高危中危低危相似案例风险预估
行业类型房地产/制造业/贸易/金融行业特征匹配
处置结果处罚/警示/合规/正常处置方案推荐
案例来源行内/监管/法院/行业可信度权重
语义
0.40
关键词
0.25
结构化
0.15
KG
0.20
KG权重较高:利用实体关联图谱做相似案例扩展
新案例摄入→DeepDoc分块→AI预标注(Qwen3-72B)→专家复核→入库
案例库优势: 标签多维检索 · KG关联扩展 · 相似度排序 · 专家标注 · 自动脱敏
📖 技术文档型专属配置
DeepDoc 自动识别API端点/参数/返回值 · Swagger/OpenAPI解析 · 代码块提取
语义
0.35
关键词
0.35
结构化
0.25
KG
0.05
技术术语和API名是关键检索信号,关键词权重较高
iWiki
技术文档优势: API端点自动解析 · 代码块保留 · Wiki同步 · 术语精确匹配
❓ FAQ型专属配置
✍️
人工编写
最准确 · 命中率高
🤖
AI生成
Qwen3-72B从文档提取 · 人工抽检10%
Qwen3-72B
📊
Excel导入
批量导入Q&A对
用户Query → 问题向量化匹配 → Cross-Encoder精排 → 直接返回答案
不需要LLM生成,延迟 <50ms · 准确率92%+ · 适合高频重复问题
bge-large-zh 问题向量化 → bge-reranker Cross-Encoder精排 → 直接答案
语义0.60 + 关键词0.30 + 结构化0.10 + KG0.00 — FAQ以语义匹配为核心
低于此阈值则转交LLM生成回答
FAQ优势: 直接答案不需LLM · 延迟<50ms · 高命中率 · 三种来源 · AI批量生成+人工抽检
🖼️ 多模态型专属配置
DeepDoc OCR(扫描件识别) · 版面分析(标题/表格/图片定位) · 表格提取(结构化保留) · 图文混合处理
图文混合检索模式
文字Query → 匹配文字chunk + 图片描述 → 返回图文混合结果
图片Query → 图片向量化 → 匹配相似图片+关联文字 → 返回图文混合结果
bge-visualized 多模态Embedding · 图片自动生成描述文字 · 表格提取为结构化数据
语义
0.30
关键词
0.20
结构化
0.30
KG
0.20
结构化权重高:表格和版面信息是关键检索信号
Qwen3-VL
多模态优势: OCR扫描件 · 版面分析 · 图文混合检索 · 表格结构化 · 跨模态Embedding
vLLM
RAGFlow
Milvus(平台统一集群)Milvus
☑ PDF(含OCR)☑ Word☑ Excel☑ 图片(OCR+描述)☑ Wiki☑ Markdown☐ 数据库导入☐ 音频(转录)
DeepDoc: OCR(扫描件)·版面分析(标题/表格/图片定位)·表格提取(结构化保留)·图文混合处理
上传
→
DeepDoc
→
分块
→
标注
→
向量化
→
入库
→
校验
📂
拖拽文件上传
PDF · Word · Excel · 图片 · Markdown · CSV · Wiki
摄入: 文件→MinIO→RAGFlow DeepDoc(OCR/版面/表格)→语义分块→元数据(密级/域/版本)→bge-large-zh向量化→Milvus入库+ES全文索引→质量抽样
问题答案来源命中准确率
信用卡年费怎么减免?消费满6次免次年年费...人工1,24796%
贷款利率是多少?根据LPR浮动...AI生成83288%
如何开通手机银行?下载APP→注册→绑定...人工2,10094%
FAQ三种来源: 1.业务专家手动编写(最准) · 2.AI从文档自动生成(Qwen3-72B,人工抽检10%) · 3.Excel批量导入
FAQ检索: 问题向量化→用户query语义匹配→Cross-Encoder精排→直接返回答案(不需LLM,延迟<50ms)
监管规则库 · 版本时间线
2026-07-01 生效
v2.1 — 更新反洗钱监管指引(央行第3号)
新增12条·修改8条·废止3条·856 chunksRAGFlow+Milvus
2026-04-01
v2.0 — 修订数据安全管理办法
2026-01-15
v1.0 — 初始版本(已全部deprecated)
版本控制: chunk带version+effective_date+status(active/deprecated)·检索默认只返回active且effective_date≤today
变更同步: 行内文档管理更新→自动触发摄入→T+1入库·监管文件外网爬取→安全评审→脱敏导入→T+3入库
版本对比: kb_version_diff工具自动对比差异
今日总任务
1,283
↑ 12%
avg工具调用轮数
3.2
↓ 0.4
知识检索命中率
87.3%
↑ 2.1%
平均端到端延迟
8.7s
↓ 1.2s
智能体调用详情
智能体日调用成功率avg工具轮数avg检索命中avg Tokenavg延迟人工介入操作
42396.2%4.182%12,5008.3s12%
2,10093.6%2.392%5,2004.7s18%
18791.5%5.878%28,00015.7s28%
36193.6%3.2—8,7006.4s18%
五类Span: intent(意图置信度) · llm_call(模型/token/延迟) · tool_call(工具名/参数hash/延迟) · decision(路径选择/备选/置信度) · state_change(状态/checkpoint/记忆层)
跨语言Trace: OTel(Python/Go/Java)→OTel Collector→LangFuse(全量)→Phoenix(采样评估)
Trace链路 — #task-20260710-0847
0ms
intent 意图识别:网络故障·置信度0.92
Qwen3-7B·ScopeGuard:运营域✓Span: intent
180ms
tool_call :错误日志
23条记录·1.2s·MCP安全网关Span: tool_call
1.5s
llm_call 根因分析
4,200in·850out·CoT12步Span: llm_call
4.8s
decision 配置变更(0.85)·网络抖动(0.3)
Span: decision
5.0s
hitl L3审批:人工确认根因
审批人:运维组李工
告警规则配置 Prometheus → Kafka → Agent触发
规则名监控指标阈值持续时间通知渠道触发动作关联Agent状态操作
P99延迟飙升P99延迟>3s持续5min飞书+短信触发运维故障定位Agent生效
成功率下降成功率<90%持续10min飞书熔断+切Fallback模型生效
Token预算超80%域Token消耗/域预算>80%实时飞书+邮件告警+限流降级生效
可疑交易标记AML-Agent风险评分>70分即时飞书+短信触发HITL L3审批生效
三层治理 Constitution拦截三层治理拦截次数>0(任何拦截)即时飞书+安全中心记录审计+通知安全官生效
告警链路: Prometheus指标采集 → 告警规则匹配 → Kafka事件发布 → 通知渠道(飞书/短信/邮件) → 触发动作(Agent启动/熔断降级/审批触发) · 事件驱动: 告警→事件→调度中心→Agent自动启动
评测数据集
BadCase
回归测试
发布门禁
Golden Set
30
核心任务·人工精标
Regression Set
50
线上失败脱敏
Edge Case
20
LLM辅助+人工筛选
Adversarial
20
Red Team攻击样本
ID场景输入预期评分难度
G01故障定位Redis集群告警...根因=配置变更,处置=回滚rubric★★★
G02信贷审批企业贷款申请...风险等级=中,建议额度...rubric★★★★
G03FAQ信用卡年费怎么减免?消费满6次免次年年费exact_match★
4种评分器: exact_match(精确匹配) · rubric(评分标准+LLM-as-Judge) · code_test(代码执行验证) · human(人工评估)
Phoenix角色: 从LangFuse导入采样数据做RAG检索质量分析、LLM输出质量、幻觉检测、实验对比
ID智能体错误类型描述根因归因修复操作
BC-042工具选择错误根因分析应调用log-search但选了db-query
1.LLM置信度仅0.65(低) 2.log-search描述不清 3.Guard未拦截
修复中
BC-038幻觉声称"信用卡免年费"但政策已变更
1.FAQ库v3.8未更新 2.检索命中旧版本(deprecated未过滤)
已修复
BC-015越权访问了对公域客户数据
1.权限Guard遗漏 2.ACL规则未覆盖跨域
已修复
自动检测
→
Trace回放
→
5类Span分析
→
根因归因
→
修复验证
→
加入Regression Set
自动回归触发配置 KB/Agent更新自动触发
触发事件触发范围回归集门禁级别阻断条件状态
KB版本更新关联此KB的所有AgentGolden SetL1 功能回归通过率<90%阻断发布生效
Agent配置变更变更的AgentGolden + RegressionL2 质量+安全BadCase率>5%阻断生效
MCP权限变更使用此MCP的AgentGolden SetL1 功能回归核心场景失败阻断生效
模型路由切换使用此模型的AgentGolden + RegressionL2 质量+安全成功率降幅>3%阻断生效
回归测试流程: 1.线上BadCase自动检测(规则+LLM-Judge采样5%) 2.LangFuse Trace回放定位失败Span 3.五类Span逐层分析(intent→tool_call→llm_call→decision→state) 4.根因归因到具体组件 5.修复后重跑Golden Set验证 6.脱敏后加入Regression Set防止回退 · 自动触发: KB/Agent/MCP/模型变更时自动触发关联Agent的回归测试
三级发布门禁
门禁级别通过标准执行频率阻断条件
L1 功能回归Golden Set通过率≥90%每次发布前核心场景失败→阻断发布
L2 质量+安全Golden≥95% + Regression≥90% + 安全对抗0失败每周+发布前BadCase率>5%→阻断
L3 人工评审业务专家评审10%样本每月评审不合格→阻断
多租户业务域隔离
零售域
2,100任务/日
资源配额:30%GPU
Milvus collection:retail_物理隔离
对公域
187任务/日
资源配额:25%GPU
Milvus collection:corp_物理隔离
风控域
312任务/日
资源配额:35%GPU
Milvus collection:risk_物理隔离
运营域
423任务/日
资源配额:10%GPU
Milvus collection:ops_物理隔离
双层隔离: 物理层(Milvus collection分域+PG schema分域+MinIO bucket分域) + 逻辑层(Scope Guard+权限Guard+输出Guard三层校验)
跨域协作: 通过"数据服务API"走正式跨域数据共享流程,有审批有审计
WORM审计日志
时间操作者操作结果Guard层完整性hash
10:32信贷审批Agentquery_customer_profile阻断Constitutionsha256:a3f2...
09:15运维故障Agentlog-search调用通过—sha256:b7c1...
08:47智能客服Agentkb-search检索通过Contextsha256:d4e5...
WORM: 一次性写入+不可删除+不可篡改 · SHA-256完整性hash · 7年保留 · 5%月度合规审查 · Decision Provenance Graph溯源图
分布式部署拓扑
编排层 (K8s)
3× Platform Runtime Pod
3× 经典运行时 Pod (Phase1-2)
3× LangGraphNative Pod (Phase3+)
6× Redis Cluster
PG HA主从
Kafka 3 Broker
推理层 (GPU)
2×A100 80GB
Qwen3-72B FP8 + DeepSeek-R1-14B INT4
+ bge-large + bge-reranker
vLLM统一推理vLLM PagedAttention
沙箱层 (裸金属)
2-3× 自托管沙箱 Host
PVM模式·单节点1000+密度
热池50-100预启动
eBPF deny-all egress自托管沙箱
特性开关 Feature Flags
特性全局状态灰度范围依赖条件操作
多Agent编排(A2A)已上线100%Agent Center + MCP 网关
DeepSeek-R1推理模式灰度5%模型路由中心
KG检索通道开发中0%RAGFlow + Neo4j
自动回归测试已上线80%评测中心
PII自动脱敏已上线100%安全合规中心
数据主权与隐私 GDPR + 个人信息保护法
数据驻留策略: 所有数据存储在中国境内机房 · 无跨境传输 · PG/Milvus/MinIO均部署在本地机房
加密密钥管理: AES-256加密存储 · 密钥由Vault(KMS)管理 · 90天自动轮换 · D4级数据双密钥加密
数据留存策略: 审计日志7年(银保监要求) · KB文档按域策略留存 · 用户请求记录3年 · 过期自动清理+合规确认
跨境限制: GPT-4o/Claude等境外模型: 仅处理D1公开数据 · D2以上数据禁止跨境 · 境外模型结果不存储原文
定时任务列表
❄ Cold Pool
5
空闲 · 随时可用
🟡 Warm Pool
3
执行中
🟢 Hot Pool
2
热缓存复用
📊 Dispatcher 队列
8
正常 · HPA 水位 40%
任务名Cron表达式关联智能体触发条件重试策略最近执行状态操作
每日风险报告生成0 8 * * *定时3次重试·间隔5min2026-07-10 08:00 ✓active
每周知识库更新检查0 9 * * 1定时2次重试2026-07-07 09:00 ✓active
每月监管报送0 10 1 * *定时+HITL L4人工审批后重试2026-06-01 10:00 ✓active
告警触发故障定位—Prometheus告警→事件3次·间隔10min2026-07-10 09:32 ✓event
新建定时任务
Cron定时
事件触发
秒 分 时 日 月 星期 · 例: 每天8点="0 8 * * *" · 每周一9点="0 9 * * 1"
触发机制: Cron定时(秒级精度) · 事件触发(Prometheus告警→Kafka→Agent启动) · 两者可组合
幂等保护: 每次执行带idempotency_key,防止重复触发 · 超时自动终止 · 失败进死信队列
场景目录
场景详情
一键部署
创建模板
场景模板数
12
本月新增 3 个
已部署场景
8
覆盖 5 个业务域
场景成功率
94.2%
↑ 2.1%
平均部署耗时
3.5min
↓ 1.2min
预置场景模板
场景名称业务域组件组合复杂度部署次数SLA状态操作
反洗钱调查助手风控AML-Agent + 反洗钱KB + aml-investigate MCP + 合规审查Skill复杂499.5%已上线
智能客服零售CS-Agent + 客服FAQ KB + email-sender MCP + 话术推荐Skill中等699.2%已上线
供应链预警供应链Supply-Agent + supply-chain-tracker MCP + 风险评估Skill + 运维KB中等299.0%灰度
投研分析助手金融投研Invest-Agent + realtime-stock MCP + 投研KB + 数据分析Skill + chart_generator复杂398.8%已上线
运维巡检助手运营Ops-Agent + 运维KB + Prometheus告警事件 + 诊断Skill简单599.8%已上线
监管报送合规Report-Agent + 监管规则KB + 文件生成Skill + HITL审批中等1100%测试中
信贷审批辅助对公Credit-Agent + 信贷KB + credit-evaluate MCP + 审批流Skill + HITL L4复杂291.5%已上线
场景组合: 每个场景 = 1个Agent + N个KB + N个MCP + N个Skill + 可选HITL · 部署时自动校验组件依赖和权限 · 一键部署: 按模板创建所有组件实例+配置关联+自动上线

反洗钱调查助手

AML交易调查全流程 · Supervisor多Agent协作 · 合规审查闭环

SLA
99.5%
部署数
4
业务域
风控
复杂度
复杂
🤖 组件拓扑 · 反洗钱调查Supervisor模式 · 4组件
AML调查协作拓扑图
🤖 AML-Agent
Supervisor · LangGraph+ADK
委派3个Worker协作
📚 反洗钱案例库
RAGFlow · 语义+KG · 5,200条案例
📚 监管规则库
RAGFlow · 关键词0.4 · 380条法规
🧩 合规审查Skill
三层治理 Guard · D3级 · 28条规则
🔌 aml-investigate MCP
query_customer_profile · 3个API
🔍 AML调查流程 · Supervisor多Worker协作
可疑交易触发
实时监控
→
AML-Agent
Supervisor调度
→
Worker:客户画像
MCP查询
+
Worker:案例比对
KB检索
+
Worker:合规审查
Skill判定
→
HITL L3
合规官审批
→
调查结论
上报/结案
可疑交易评分>70 → 自动触发AML-Agent · 多Worker并行调查 · 合规审查Skill实时拦截 · L3合规官终审
📊 运营指标 · 反洗钱调查
日均触发量
48
↑ 8条/月
调查完成率
96.2%
↑ 1.5%
合规拦截率
23.1%
三层治理规则生效
平均调查耗时
18min
↓ 人工1.5h
数据分级: D3 内部受限 · 审批层级: HITL L3合规官 · 月均调用: 1,240次 · 模型路由: Qwen3-72B(主) → DeepSeek-V3(备)
依赖校验: MCP ACL→KB D3级匹配→Skill 三层治理规则→Agent配置完整性 · 合规审查Skill为强制挂载项 · 不可移除
一键部署 — 反洗钱调查助手
自动部署清单 依赖自动校验
✓ AML-Agent — Supervisor模式 · LangGraph+ADK A2A · 已校验配置
✓ 反洗钱案例库 — RAGFlow · 语义0.4+KG0.1 · 数据分级D3 ✓
✓ aml-investigate MCP — 已通过ACL授权 · L2级安全 ✓
✓ 合规审查Skill — 三层治理 Guard D3级规则 ✓
✓ HITL审批流 — L3合规官审批链 ✓
⟳ 灰度策略 — 先5%流量 → 观察24h → 20% → 100%
创建场景模板
智能体选择 Agent Center
Agent AML-Agent Supervisor · LangGraph ✕
知识库挂载
KB 反洗钱案例库 D3级 ✕
MCP/Skill挂载
MCP aml-investigate-server query_customer_profile ✕
Skill 合规审查Skill 三层治理 D3级 ✕
模板校验: 创建时自动校验: 所有组件是否存在→数据分级是否匹配→ACL权限是否满足→SLA是否可达 · 不满足则标红提示
模型目录
路由策略
Token预算
性能监控
接入模型数
6
本月新增 Qwen3-72B
总调用次数
28.4万
↑ 12%
平均延迟
1.2s
↓ 0.3s
总Token消耗
4.8亿
↑ 8%
模型目录
模型提供商参数量上下文窗口单价(输入/输出)数据分级适用场景状态
DeepSeek-V3DeepSeek685B MoE128K¥0.5/¥2/MtokenD2 内部客服·运维·通用在线
Qwen3-72B云厂商72B128K¥2/¥6/Mtoken内部部署投研·风控·复杂推理在线
GPT-4oOpenAI—128K$5/$15/MtokenD3 受限多模态·高级推理在线
Qwen3-8B本地部署8B32K免费(自有GPU)D1 公开简单问答·路由兜底在线
DeepSeek-R1DeepSeek685B128K¥1/¥4/MtokenD2 内部数学推理·代码生成灰度
Claude-3.5Anthropic—200K$3/$15/MtokenD3 受限长文分析·合规审查待审批
模型接入: LiteLLM统一代理 · OpenAI兼容接口 · 自动负载均衡 · 模型健康探针每30s · 数据分级: D3级数据只允许本地/受控模型处理,禁止跨境传输
路由策略配置
业务域主模型Fallback链路由条件熔断阈值操作
风控Qwen3-72BQwen3-72B → DeepSeek-V3 → Qwen3-8B数据分级≥D2 · 含推理P99>3s 或 成功率<95%
智能客服DeepSeek-V3DeepSeek-V3 → Qwen3-8B数据分级≤D2 · 简单问答P99>2s 或 成功率<90%
金融投研Qwen3-72BQwen3-72B → DeepSeek-R1 → GPT-4o数据分级≥D2 · 含数学推理P99>5s 或 成功率<98%
运维巡检Qwen3-8BQwen3-8B → DeepSeek-V3数据分级≤D1 · 快速响应P99>1s
Fallback链工作流 LiteLLM Router
Qwen3-72B
主模型
→
DeepSeek-V3
Fallback 1
→
Qwen3-8B
Fallback 2 · 兜底
→
熔断报错
全部失败
路由策略: 按业务域+数据分级+任务类型三维度路由 · LiteLLM统一代理层 · 熔断后自动切Fallback · 熔断恢复后5分钟逐步回切 · 延迟阈值: P99超标自动降级
Token预算分配 按域·按月·按模型
业务域月度预算已消耗消耗率超额策略主模型占比操作
金融投研¥50万/月¥39.2万
78%
降级到Qwen3-8BQwen3-72B 85%
智能客服¥30万/月¥21万
70%
限流30QPMDeepSeek-V3 90%
风控¥20万/月¥14.8万
74%
降级+人工审批Qwen3-72B 80%
运维¥5万/月¥2.1万
42%
不限(本地模型)Qwen3-8B 95%
预算管控: 月度预算按域分配 · 消耗超80%告警 · 超100%自动降级到低成本模型 · 本地部署模型不计入Token预算 · 成本归属: 每次调用精确归属到Agent→域→租户
模型性能实时监控
模型调用量(今日)P50延迟P99延迟成功率Token/调用熔断状态
Qwen3-72B1,2400.8s2.1s97.8%2,400正常
DeepSeek-V38,4200.6s1.8s94.2%1,800正常
GPT-4o3201.2s4.2s88.3%3,200观察中
Qwen3-8B12,4000.3s0.8s99.6%600正常
监控机制: 每30s健康探针 · P99延迟超标触发熔断 · 成功率低于阈值自动切Fallback · 告警联动: 熔断事件→Kafka→可观测性→调度中心(事件触发)
本月总成本
¥77.1万
↑ 8.2%
月度预算总额
¥105万
消耗率 73%
本地模型省成本
¥14.2万
Qwen3-8B免费
超额熔断次数
0
本月无熔断
按业务域成本分布
业务域模型成本存储成本计算成本总成本预算消耗率超额策略趋势
金融投研¥35.2万¥2.4万¥1.6万¥39.2万¥50万
降级Qwen3-8B↑ 稳
智能客服¥18.5万¥1.2万¥1.3万¥21万¥30万
限流30QPM↑ 稳
风控¥13.2万¥0.8万¥0.8万¥14.8万¥20万
降级+审批↑ 快
运维¥0(本地)¥0.6万¥1.5万¥2.1万¥5万
不限↓ 降
按Agent成本TOP5
Agent本月调用平均Token/调用模型成本占比优化建议操作
1,2403,200¥18.7万24.3% 短问答切Qwen3-8B省¥12万/月
8562,400¥6.8万8.8%推理步骤可缓存减少重复调用
12,400800¥14.9万19.4% 直接命中免LLM省¥8万/月
3,200400¥0(本地)0%已使用本地模型,无外部成本
4201,600¥4.2万5.5% 监控类可用轻量模型
成本核算: 每次调用精确记录: Agent→域→租户→模型→Token数→金额 · 按月汇总 · 超额80%告警 → 100%熔断降级 · ROI追踪: 每个场景对比"人工成本 vs AI成本"计算节省率
内容安全
PII脱敏
审计日志
合规报告
今日拦截次数
23
↓ 15%
拦截率
0.12%
正常范围
三层治理规则数
86
本月新增4条
合规审计通过率
98.6%
↑ 0.3%
三层治理三层治理规则 Constitution · Guidance · Context
层级规则名作用域触发动作命中次数(今日)状态
Constitution禁止泄露客户身份信息全局阻断 + 告警安全中心3生效
Constitution禁止输出未授权投资建议全局阻断 + HITL审批1生效
Guidance风控域回答必须引用监管条文风控域重写 + 加引用标注8生效
Guidance客服域回答必须带免责声明客服域追加免责声明12生效
Context投研域回答限制在最近30天数据投研域截断 + 提示时效5生效
今日拦截详情
时间Agent触发规则用户输入摘要拦截动作处理人操作
10:23Constitution: 禁止泄露客户身份"请告诉我张三的贷款金额"阻断系统自动
09:47Guidance: 投资建议需合规审查"推荐我买XX股票"重写+审批合规官张XX
08:15Context: 免责声明追加"这个利率是多少"追加免责系统自动
三层治理三层: Constitution(全局红线·不可违反) · Guidance(域级引导·可重写) · Context(场景级约束·可追加) · 拦截动作: 阻断/重写/追加/降级 · 所有拦截均记录到审计日志SHA-256不可篡改
PII自动检测与脱敏 Presidio + 正则+NER
PII检测规则配置
PII类型检测方法脱敏策略适用数据分级示例状态
客户姓名NER(Presidio) + 姓名库替换为"客户XXX"D2及以上张三 → 客户A001生效
身份证号正则(18位) + 校验保留前3后1,中间掩码D3及以上310***\*\*\*\***1生效
银行卡号正则(16-19位)全部掩码D3及以上\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*生效
手机号正则(11位)保留前3后4D2及以上138\*\*\*\*5678生效
金额NER + 金额模式范围化(区间替代精确值)D3及以上¥5.2万 → ¥5-6万区间生效
脱敏流程
用户输入
→
PII检测
Presidio+NER
→
脱敏替换
按分级策略
→
安全输入→LLM
PII脱敏: 输入侧全量检测 · 按数据分级选择脱敏强度 · D3级精确值→区间化 · 输出侧二次检测防泄露 · 审计: 每次脱敏操作记录原文(加密存储)+脱敏结果+操作时间SHA-256
审计日志检索 WORM · SHA-256 · 7年留存
审计记录
时间操作主体对象数据分级结果SHA-256合规
2026-07-10 10:23:01三层治理拦截AML-Agent客户身份查询D3阻断a3f2...8b1c✓
2026-07-10 09:47:15LLM调用投研分析Qwen3-72BD2成功7d1e...4a9f✓
2026-07-10 08:15:22PII脱敏智能客服手机号138****5678D2脱敏成功e5b3...2c7d✓
WORM审计: Write-Once-Read-Many · SHA-256不可篡改 · 7年留存(银保监要求) · 每月5%合规抽查 · 检索: 支持按时间/操作类型/Agent/数据分级多维检索 · 导出为加密PDF+CSV
合规报告生成
报告类型周期覆盖范围生成时间合规率关键发现状态
月度合规审查2026年7月全部Agent+全部场景2026-07-0198.6%3次Constitution拦截均合规处理已生成
PII脱敏审计2026年7月全部PII检测记录2026-07-01100%所有D3级数据均已脱敏已生成
季度安全评估2026 Q2安全事件+权限变更+数据跨境2026-04-0199.2%无数据泄露事件 · 无跨境违规已生成
合规报告: 月度合规审查(银保监要求) · 季度安全评估 · 年度数据主权报告 · 自动生成+合规官签批 · SHA-256签名防篡改 · 5%抽查: 每月随机抽取5%审计记录人工复核
角色与权限
团队管理
认证配置
API密钥
角色定义与RBAC矩阵 4类角色 · 数据分级绑定
角色数据分级权限用户数
平台管理员D1-D4 全量创建/编辑/删除/发布注册/审核/授权创建/管理/删除配置/执行/审批查看/导出/配置3
业务开发D1-D3(按域限制)创建/编辑(本域)申请使用创建(本域)/查询执行(本域)查看(本域)18
运维监控D1-D2查看/配置(非编辑)查看状态查看/更新数据执行/查看结果查看+告警5
审计查看D1(只读)只读只读只读只读全量查看/导出2
RBAC: 4类角色 × 6大功能模块 × 4级数据分级 · 角色和数据分级双重约束 · D3级操作必须双人审批 · D4级仅平台管理员可操作 · 最小权限原则: 默认无权限,按需申请
团队/租户管理
团队/租户业务域成员数Agent数数据分级范围月度预算隔离策略操作
风控团队风控6D1-D3¥20万Milvus collection风控_ · PG schema risk_ · MinIO bucket risk
零售银行零售12D1-D2¥30万Milvus collection retail_ · PG schema retail_ · MinIO bucket retail
金融投研金融投研8D1-D3¥50万Milvus collection invest_ · PG schema invest_ · MinIO bucket invest
运营中心运营4D1-D2¥5万Milvus collection ops_ · PG schema ops_ · MinIO bucket ops
多租户隔离: 物理隔离(Milvus collection/PG schema/MinIO bucket) + 逻辑隔离(Guard权限) · 团队间数据不可互访 · 跨域协作需平台管理员审批 · 预算隔离: 每团队独立预算额度
认证配置 LDAP · OAuth2.0 · SAML
LDAP(企业AD)
OAuth2.0
SAML 2.0
本地账号
LDAP配置
AD组"Platform-Admins" → 平台管理员 · AD组"Domain-Dev" → 业务开发 · AD组"Domain-Ops" → 运维监控
安全策略
继承AD策略 · 8位以上 · 含大小写+数字 · 90天轮换 · 历史密码不可重复
API密钥管理
密钥名关联角色关联团队数据分级范围创建时间过期时间调用次数(本月)状态操作
risk-api-key业务开发风控团队D1-D32026-03-012026-09-011,240active
ops-monitor-key运维监控运营中心D1-D22026-05-012027-05-013,200active
密钥管理: 每密钥绑定角色+团队+数据分级范围 · 密钥过期自动失效 · 90天轮换周期 · 撤销不可恢复 · 调用追踪: 每次API调用记录密钥ID→审计日志 · 异常调用(跨域/超频)自动告警
待审批 (3)
审批详情
已审批历史
审批规则配置
⚠ 待我审批
3
需要您的决策
今日已审批
5
↑ 通过4·驳回1
平均审批耗时
8.2min
↓ 2.1min
AI辅助采纳率
76%
↑ 5%
⚠ 待审批任务按紧急度排序 · 超时4h自动升级
紧急度审批类型Agent/Skill审批人角色触发事由AI建议等待时间操作
紧急HITL L3 · 合规审批L1 Admin
张明远
风控反洗钱调查完成 · 需合规官确认调查结论建议通过 AI置信度0.921h 23min
一般HITL L3 · 根因确认L2 Team
李运维
运营根因分析完成 · 等待运维工程师确认处置方案建议通过 AI置信度0.853h 10min
一般HITL L4 · 双人复核L3 Worker
王合规 + 赵风控
合规月度监管报送数据 · 需合规官+风险官双人复核需人工判断5h 42min
审批流程: HITL L1(通知型·自动通过) → L2(确认型·一键通过/驳回) → L3(审批型·需审批员决策) → L4(双人复核·需两人独立确认) → L5(委员会·多人投票)
超时机制: L3级4h未审批→升级到上级 → L4级24h→升级到合规总监
🔍 审批详情 — 反洗钱调查 #AML-20260710-003待您审批
审批类型
HITL L3 · 合规审批
触发Agent
业务域
风控 · D3级数据
等待时间
1h 23min
🤖 AI完整推理过程 LangGraph · Trace回放
0ms
intent 用户输入: "请调查客户ID=C0042近期交易行为"
200ms
tool_call query_customer_profile → 客户基本信息(已脱敏)
客户A001 · 近30天交易47笔 · 大额转账3笔
1.8s
tool_call analyze_transaction_chain → 交易链路分析
发现3笔跨行大额转账 · 金额区间¥5-6万 · 频率异常
4.5s
llm_call Qwen3-72B → 模式识别与风险评估
置信度0.92 · 判定: 可疑交易模式 · 风险评分78/100
5.0s
HITL L3 ⚠ 等待合规官审批 → 您在此处决策
🧠 AI调查结论与建议
AML-Agent 调查结论:
1. 客户A001近30天存在3笔跨行大额转账,金额分别为¥5.2万、¥5.8万、¥6.1万
2. 交易模式符合"分散转入、集中转出"的可疑特征
3. 风险评分78/100(AI置信度0.92),建议标记为中高风险
4. 建议: 上报反洗钱监测中心 + 暂停该客户大额转账权限 + 启动深度调查
✓ AI建议: 通过调查结论 · 标记可疑 · 上报监管 · Guard审核: 所有数据已脱敏 · 无越权访问
📝 审批决策
审批上下文: 审批员看到完整的AI推理过程(intent→tool_call→llm_call→decision→HITL暂停点) · 脱敏保证: PII已脱敏·Guard三层校验·WORM审计记录·SHA-256签名
审批后动作: 通过→自动执行后续步骤+审计记录 · 驳回→Agent重新分析+告警 · 补充→Agent补充后重新提交
已审批历史
时间审批类型Agent业务域AI建议审批决策审批意见审批耗时SHA-256
10:45HITL L3AML-Agent风控建议通过✓ 通过可疑交易特征确认,同意上报8mina3f2...8b1c
09:30HITL L2运维故障定位运营建议通过✓ 确认根因确认,同意回滚2min7d1e...4a9f
08:20HITL L3投研分析金融投研需判断✕ 驳回投资建议需合规审查后再发15mine5b3...2c7d
07:10HITL L4监管报送合规建议通过✓ 双人复核通过数据准确,同意报送22minf1a8...6d3e
HITL审批规则配置 按场景·按数据分级·按风险等级
场景数据分级HITL级别触发条件审批人超时策略状态操作
反洗钱调查D3L3 审批型调查结论生成后·风险评分>70合规官4h→升级合规总监生效
信贷审批D3L4 双人复核审批额度>500万信贷经理+风险经理24h→升级分管行长生效
运维处置D2L2 确认型处置方案生成后·影响>10用户运维工程师2h→自动通过+告警生效
监管报送D3L4 双人复核报送数据生成后合规官+风险官24h→升级合规总监生效
投资建议D2L3 审批型涉及具体投资标的推荐合规官4h→自动驳回生效
HITL5级: L1通知型(自动通过+通知) · L2确认型(一键通过/驳回) · L3审批型(需审批员写意见) · L4双人复核(两人独立确认) · L5委员会型(3人以上投票) · 规则绑定: 场景+数据分级+风险等级三维度自动匹配HITL级别
飞轮总览
改善闭环
数据回流
自优化配置
6条数据回流路径每条箭头标注本周流转数据量,点击可跳转对应模块
数据飞轮 持续自优化 🧠 智能体 24个活跃 📚 知识库 5个KB 🔧 Skill 灰度迭代 🤖 模型路由 成本+性能 🎯 评测中心 BadCase驱动 👁 可观测性 Trace+Log 1,283 Trace 23 告警 18 知识补缺 5 Skill修复 3 路由调整 2 版本升级 召回↑3% 成本↓12%
46
本周改善闭环数
↑ 23% 较上周
87%
改善验证通过率
40/46 改善已验证生效
2.1天
平均改善周期
↓ 0.3天 较上月
飞轮运转效果 (本月)
飞轮路径触发源改善目标本月流转数验证通过率平均周期效果指标
Agent→观测→评测→KBAgent调用Trace知识补缺入库1889%1.5天
Agent→观测→评测→Skill成功率下降Skill逻辑修复580%2.8天
Agent→观测→评测→模型P99延迟超标模型路由调整3100%0.5天
评测→审批→策略HITL驳回决策Guard规则更新786%3天
Skill→AgentSkill灰度完成Agent配置自动更新2100%1天
观测→成本→模型成本超80%模型降级/限流475%0.3天
改善闭环故事
每条改善故事展示完整的闭环路径:触发源 → 诊断 → 改善动作 → 效果验证
🔴 触发
BadCase #BC-237
AML-Agent 反洗钱调查案例匹配失败,返回"未找到相关案例"
2026-07-08 14:30
🟡 诊断
知识缺失
反洗钱案例库缺少"跨境分拆"类型案例,检索权重KG通道过低
🟢 改善
KB补充 + 权重调整
新增12条跨境分拆案例(KB v2.3) + KG权重0.1→0.2
🔵 验证
回归测试通过 ✅
AML案例召回率 72%→85%↑13%,BadCase #BC-237已修复
🔴 触发
告警 #AL-042
智能客服 Skill v1.8 成功率连续3天下降至88.2%
2026-07-06 09:00
🟡 诊断
Skill逻辑缺陷
多轮对话上下文丢失,FAQ缓存命中逻辑错误
🟢 改善
Skill v1.9 灰度发布
+多轮对话优化 · +FAQ缓存修复 · +免责声明自动追加
🟡 验证
灰度5% 观察中
灰度组成功率95.3% > 基线组88.2%,预计7天全量
🔴 触发
HITL驳回 #HITL-89
信贷审批Agent建议"通过",审批员驳回——信用评分阈值过低
2026-07-07 16:20
🟡 诊断
Guard规则过松
信用评分阈值650过低,三层治理第2层拦截未触发
🟢 改善
阈值上调至680
三层治理第2层规则更新: 信用评分<680→自动触发HITL L4双人复核
🟢 验证
HITL驳回率下降 ✅
信贷HITL驳回率 15%→4%,拦截率↑5%
🔴 触发
成本超限 #COST-07
7月10日 Token成本¥7.7万,月预算80%已消耗
2026-07-10 08:00
🟡 诊断
模型选择过重
FAQ场景60%请求路由到Qwen3-72B,实际Qwen3-8B即可满足
🟢 改善
路由规则调整
FAQ场景→Qwen3-8B(免费),复杂推理→Qwen3-72B(付费)
🔵 验证
成本下降 ✅
FAQ场景成本↓40%,整体月成本预测从¥93万→¥82万
6条数据回流路径详情
回流路径数据来源数据类型本周流转本月累计处理延迟成功率效果度量操作
评测 → 知识库 知识缺失案例 + 检索失败query 18条 67条 1.5天 89% KB召回率 ↑13% (72%→85%)
评测 → Skill 逻辑缺陷 + 灰度指标异常 5条 19条 2.8天 80% 成功率 ↑2% (88%→95.3%)
评测 → 模型路由 延迟超标 + 模型不适配案例 3条 11条 0.5天 100% 成本 ↓12% · P99 ↓1.2s
审批 → Guard规则 人工纠正决策 + 风险评分修正 7条 28条 3天 86% 三层治理拦截率 ↑5%
Skill → Agent配置 Skill版本升级通知 + 配置变更 2条 8条 1天 100% 零中断升级
成本 → 模型降级 Token成本数据 + QPM限流事件 4条 15条 0.3天 75% 月成本 ↓8%
飞轮加速趋势 (近4周)
0 25 50 75 W1 (6/16) W2 (6/23) W3 (6/30) W4 (7/7) KB补缺 Skill修复 路由调整 Guard规则
自动触发规则配置当阈值触发时,系统自动启动改善闭环
规则名称触发条件触发阈值改善动作改善目标模块验证方式状态操作
BadCase→KB自补缺评测BadCase标记为"知识缺失"≥3条同类BadCase自动生成KB补充任务 → 人工复核自动回归测试 + 召回率对比启用
成功率下降→Skill灰度暂停Skill成功率连续3天下降下降≥5% 或 低于90%暂停灰度发布 + 触发Skill诊断灰度组vs基线组成功率对比启用
P99延迟→模型路由调整Agent P99延迟超过阈值P99 > 3s 连续2小时自动调整模型路由(降级到更快模型)延迟指标恢复 + 成本影响评估启用
成本超限→模型降级限流月Token成本达到预算80%月成本 ≥ 80%预算FAQ/简单场景路由到免费模型 + QPM限流成本趋势 + 服务质量SLA监控启用
HITL驳回→Guard规则更新HITL审批驳回率异常上升驳回率 > 10% 或 单场景>15%触发Guard规则诊断 + 阈值调整建议驳回率下降 + 拦截率提升需审批
灰度完成→Agent自动更新Skill灰度达到100%全量灰度比例 = 100% 且 指标达标自动更新关联Agent的Skill版本配置Agent成功率无下降(回滚保护)启用
自优化安全边界: ① 所有自动改善动作均记录WORM SHA-256审计日志 ② Guard/安全规则修改必须经过安全团队审批(HITL L4) ③ 自动路由调整有回滚保护(72小时内成功率下降→自动回滚) ④ 成本限流有SLA保障(核心场景不受限流影响) ⑤ 飞轮运转数据每月向合规部报送
改善周期优化配置
超过此数量需人工审批
灰度期间指标必须持续优于基线
调整后72小时内成功率下降→自动回滚
EvalCenter
☑ 反洗钱(不受限流)☑ 信贷审批(不受限流)☐ 智能客服(可限流)☐ FAQ问答(优先限流)
Prompt版本
A/B 测试
模板市场
效果追踪
反洗钱调查助手 · Prompt版本历史当前生产版本: v3
v3 生产 2024-01-15 发布
成功率 96.2% · 日均调用423次 · 平均3.2轮
System Prompt
你是反洗钱调查助手。根据客户画像和交易链路,完成可疑模式识别和风险评估。必须遵循:①所有数值引用需标注来源 ②风险评分需附3个以上证据点 ③金额类输出需二次校验 ④不确定结论标注[不确定]
变更摘要: + 数值二次校验指令 + 不确定结论强制标注 + 证据点最低3个要求
v2 灰度20% 2024-01-08 发布
成功率 93.8% · 灰度流量84次 · 幻觉率4.2%
System Prompt
你是反洗钱调查助手。根据客户画像和交易链路,完成可疑模式识别和风险评估。不确定结论需标注[不确定]。
变更摘要: + 不确定结论标注指令(相比v1唯一变更)
v1 归档 2023-12-20 发布
成功率 91.5% · 幻觉率7.8% · 已停用
System Prompt
你是反洗钱调查助手。根据客户画像和交易链路,完成可疑模式识别和风险评估。
版本效果对比
指标v1 (归档)v2 (灰度)v3 (生产)变更因果
成功率91.5%93.8%96.2%+不确定标注→减少盲目断言
幻觉率7.8%4.2%1.6%+数值校验指令→数值幻觉↓5.2%
平均轮次4.13.83.2+证据点要求→减少低质量调用
人工介入率28%22%16%结论更明确→HITL↓
Prompt版本管理原则: 每个版本必须记录变更摘要 → 发布前必须跑回归评测 → 灰度至少7天且效果优于当前生产 → 回滚一键切换
Prompt A/B 测试实验
同时运行两个Prompt版本,对比效果后决定是否全量切换。实验期间流量按比例分配。
实验 #12: 数值校验指令强化 进行中 Day 3/7
A版本 (对照组) = v3 生产Prompt
流量分配: 80%
指标值
成功率96.2%
幻觉率1.6%
数值偏差0.3%
样本量338次
B版本 (实验组) = v3 + 金融数值专校验
流量分配: 20%
指标值vs A
成功率97.8%↑1.6%
幻觉率0.8%↓0.8%
数值偏差0.05%↓0.25%
样本量85次—
B版本在数值偏差上显著优于A (p<0.05) · 建议全量切换
+ 创建新 A/B 实验
选择基准Prompt → 编辑实验Prompt → 设定流量比例(5%~50%) → 设定实验周期(3~14天)
Prompt 模板市场
模板名称业务域适用Agent类型关键指令引用次数平均效果操作
金融数值校验Prompt跨域Supervisor / Autonomous数值二次校验+偏差标注+来源引用14幻觉↓82%
反洗钱调查Prompt风控Supervisor可疑模式识别+证据链+HITL决策8成功率96.2%
信贷风险评估Prompt对公Supervisor风险评分+阈值路由+双人复核6成功率91.5%
不确定结论标注Prompt跨域所有类型强制标注[不确定]+置信度+替代方案22盲目断言↓67%
Prompt变更 → 效果因果追踪
变更事件变更内容评测结果生产效果(7天)业务方反馈因果判定
v1→v2+不确定结论标注幻觉率7.8%→4.2%幻觉率↓3.6%"结论可信度提升"✓ 确认因果
v2→v3+数值二次校验+证据点最低3个幻觉率4.2%→1.6%数值偏差↓0.25%"数值终于准确了"✓ 确认因果
实验#12+金融数值专校验数值偏差0.3%→0.05%进行中(Day3)待收集⏳ 实验中
效果回退告警
✓ 未触发回退 最近7天所有Prompt变更均带来正向效果
回退触发条件: 成功率下降>2% | 幻觉率上升>1% | 业务方投诉≥3次 | 三层治理拦截率上升>5%
推理链路
三层治理过滤日志
数据分级追踪
合规报告
推理链路追溯 · #AML-2024-00872024-01-16 14:32 · 调查员: 张伟
Step 1
客户画像构建
调用 MCP query_customer_profile → 客户画像(姓名**[已脱敏]**、42岁、贸易公司法人、关联账户3个)
2.3s · 420token
Step 2
交易链路分析
调用 MCP analyze_transaction_chain → 3笔指向同一受益人[已脱敏],金额合计**820万**,3天内完成
5.1s · 680token
Step 3
案例比对 & 模式识别
检索 KB 反洗钱案例库 → 匹配3个相似案例(0.87,0.82,0.75) → KB 监管规则库 → 命中2条红线: §3.1短期内多笔大额同受益人 + §5.2贸易公司法人关联异常
3.4s · 560token
Step 4 ⚡
风险评估 & 三层治理过滤 · 决策点
综合推理: risk_score=0.82 → 三层治理三层: ①合规红线命中2条(标注通过) ②PII已脱敏(通过) ③金额820万与源数据一致(通过) → 触发HITL L3
HITL L3
合规官审批
Step 5
报告生成 & 输出
输出: investigation_report + evidence_chain(5节点) + recommendation=上报 + hitl_required=true
1.2s · 340token
决策依据溯源 · risk_score=0.82
证据点来源引用详情贡献权重
短期内多笔大额同受益人KB §3.13天3笔→同一受益人,820万0.35
3个相似案例命中KB 反洗钱案例库#47(0.87), #112(0.82), #203(0.75)0.25
贸易公司法人关联异常KB §5.2法人关联3个异常账户0.22
交易链路异常模式MCP analyze_transaction_chain资金流向集中、时间压缩、金额递增0.18
权重由LLM推理过程生成,归一化总和=1.0 · 每个权重可溯源到KB条目和MCP调用结果
三层治理三层过滤日志
时间Agent过滤层原始输出过滤结果拦截/标注
14:32:18AML-Agent合规红线命中§3.1+§5.2通过(标注)2条红线命中,标注但未拦截
14:32:18AML-AgentPII脱敏客户姓名: 张XX通过(脱敏)姓名→[已脱敏],身份证→[已脱敏]
14:32:18AML-Agent事实校验金额820万通过(一致)源数据核对: 820万 ✓
14:28:03Credit-Agent合规红线建议利率4.5%拦截!§2.3利率低于最低标准4.8%
23次
合规红线拦截
占比1.8%
142次
PII脱敏处理
占比11.2%
8次
事实校验不一致
占比0.6%
数据分级流向追踪
案例 #AML-2024-0087 数据流向
KB: 反洗钱案例库
D3
→
AML-Agent
→
三层治理过滤
PII脱敏 ✓
→
输出
D3→D2(脱敏后)
✓ 合规: D3→D2(经PII脱敏) · ✓ 精炼摘要模式(≤500token)
⚠ 近7天数据分级违规告警 (2条)
时间违规描述处置
01-14D3 KB数据被D1级Agent(临时数据分析)引用已阻断 + 告警
01-12CS-Agent(零售D2)调用aml-investigate MCP(风控D3) → 跨域越权已阻断 + MCP网关拒绝
合规报告生成 · 面向银保监/人行
银保监 AI系统合规报告
AI决策透明度、HITL机制、数据分级合规
上次01-15 季度报告
人行 反洗钱AI辅助合规报告
AI调查辅助合规性、三层治理有效性、数据分级
待生成Q1 半年度报告
数据项来源当前值合规标准
AI决策可追溯率审计追溯中心100%≥99%
HITL覆盖率审批工作台98.2%≥95%
三层治理过滤覆盖率三层治理日志100%100%
数据分级违规次数数据分级追踪2次/7天0次/月(目标)
PII泄露事件PII脱敏日志00(红线)
数据集管理
自动回归评测
对抗性评测
业务反馈回流
场景化评测数据集
数据集业务域题目数版本覆盖场景上次评测操作
反洗钱调查基准风控100题v3.1画像/交易/模式/风险01-15 96.2%
信贷审批基准对公80题v2.0风险评估/阈值/审批/HITL01-13 91.5%
智能客服对话基准零售50题v1.5FAQ/情绪/话术/满意度01-14 93.6%
金融数值校验基准跨域60题v1.0金额/利率/日期精度01-16 99.2%
反洗钱调查基准 v3.1 构成
25题
客户画像
25题
交易链路
25题
模式识别
25题
风险评估
自动回归评测 · 变更→评测→门禁
触发事件数据集评测结果vs上次门禁操作
Prompt v2→v3反洗钱100题96.2%↑2.4%✓ 通过
Skill v1.2→v1.3信贷80题91.5%持平⚠ 灰度观察
KB反洗钱v3.1→v3.2反洗钱100题96.4%↑0.2%✓ 通过
发布门禁规则
门禁项阈值说明
成功率vs上次≥持平不允许成功率下降
幻觉率vs上次≤持平不允许幻觉率上升
新增BadCase≤3个严重BadCase不超过3个
D3级场景强制HITL审批风控/合规必须人工审批
对抗性评测 · 安全韧性测试
对抗类型测试集规模防御机制通过率
Prompt注入150题三层治理指令检测+角色边界98.7%
越狱攻击80题三层治理安全边界+话题约束97.5%
数据投毒50题KB版本管控+事实校验94.0%
角色冒充40题身份校验+MCP ACL99.2%
信息提取60题PII脱敏+输出过滤99.8%
数据投毒 94.0% — 3个BadCase
#1: KB插入虚假法规 → Agent引用但未校验版本号 · #2: KB修改金额 → 数值校验未触发(偏差<0.5%) · #3: KB注入无关条目 → RAG误召回
改进: KB引用附带版本号+来源 · 数值阈值收紧0.1% · RAG增加来源可信度评分
业务方反馈 → 评测数据集回流
时间业务方反馈类型量化记录回流状态
01-16调查员张伟"风险评分偏高"AI评分0.82 vs 人工0.65 → 偏差0.17✓ 已回流 +3题
01-14信贷经理王强"建议冻结过于激进"AI冻结率35% vs 人工12%⏳ 待回流 +5题
业务方反馈
→
量化记录
→
回流数据集
→
回归评测
→
Prompt优化
检测中心
数值校验
逻辑一致性
幻觉标记体系
幻觉检测总览
1.6%
整体幻觉率
↓5.2%
0.3%
数值幻觉率
↓0.5%
0.8%
事实幻觉率
↓3.4%
0.5%
逻辑矛盾率
↓2.1%
时间Agent幻觉类型原始输出纠正来源校验
01-16Credit-Agent数值幻觉贷款金额500万实际50万 → 偏差10倍源数据核对不一致 → 三层治理阻断
01-14AML-Agent事实幻觉引用法规"银保监2024年第8号"法规不存在KB检索未命中 → 标注[不确定]
01-13CS-Agent逻辑矛盾先说"建议保留"后说"建议冻结"自相矛盾一致性检查 → 重新推理
零容忍策略: 数值偏差>0.5% → 阻断+HITL | 法规不存在 → 标注[不确定]+阻断 | 逻辑矛盾 → 重新推理 | 所有阻断必须审计日志
金融数值专校验机制
数值类型校验方法容忍阈值阻断阈值校验数据源
金额源数据二次核对0.1%0.5%(含零偏差)MCP: query_transaction_detail
利率基准利率表核对0.01%0.1%KB: 利率基准库
日期/期限源数据时间戳核对1天7天MCP: query_contract_detail
百分比计算验证(A/B=C%)0.5%2%实时计算校验
风险评分模型输出一致性0.050.15二次推理比对
Agent输出
"金额500万"
→
数值提取
→
源数据核对
实际50万
→
偏差10倍
>阻断阈值
→
阻断输出
+ HITL L4
逻辑一致性检查
矛盾类型检测方法示例处置频率
结论-建议矛盾语义比对风险低 + 建议冻结阻断+重新推理0.3%/周
数值-文字矛盾数值提取比对文字"增长" + 数值-5%阻断+修正0.1%/周
前后文矛盾上下文连贯性Step3"无异常" + Step5"高风险"标注+人工复核0.4%/周
跨来源矛盾多KB条目冲突案例库"常见" + 规则库"红线"标注来源+HITL判定0.2%/周
输出幻觉标记体系
标记类型标记符号含义校验方法可信度
引用事实[引用]来自KB/MCP源数据源数据核对 ✓高(99%+)
AI推断[推断]LLM基于证据推理逻辑+数值校验 ✓中(95%+)
不确定[不确定]证据不足或矛盾标注+替代方案低
阻断[阻断]三层治理拦截,未输出阻断+告警+HITL不可信
标记示例
[引用] 客户3天内完成3笔大额交易,合计820万,受益人均为同一人 (来源: MCP analyze_transaction_chain)
[推断] 交易模式与3个历史案例相似,触发监管红线§3.1和§5.2 (推断依据: KB匹配+规则命中)
[不确定] 可能存在境外关联账户,当前数据不足以确认 (替代方案: 建议进一步调查境外资金流向)
记忆管理
上下文窗口
共享与隔离
记忆治理
Agent长期记忆管理
Agent记忆类型存储量衰减策略PII含量操作
AML-Agent调查记忆2,340条(12%)90天衰减·案例永久·临时24hD3级32%
Credit-Agent审批记忆1,120条(6%)180天·审批结论永久·过程30天D3级45%
CS-Agent对话记忆18,400条(52%)7天·情绪30天·FAQ命中永久D2级18%
Ops-Agent诊断记忆3,200条(18%)30天·根因模式永久·告警7天D1级2%
🧠 长期记忆(永久)
案例模式·合规红线·法规版本·审批结论
占比15%·D3级·WORM审计·不可删除
📝 工作记忆(90天)
调查过程·客户画像摘要·交易链路结果
占比55%·PII精炼摘要·衰减后自动清理
⚡ 临时记忆(24h)
当前对话上下文·工具调用中间结果
占比30%·会话结束即清理·不持久化
上下文窗口优化可视化
AML-Agent 当前会话 · Token预算 50000
System
4k
KB
10k
MCP
6k
推理
7.5k
冗余
2.5k
剩余 20k
触发条件压缩方法效果安全约束
Token>80%历史对话→摘要压缩↓60%tokenD3级对话不压缩
KB检索>top-10bge-reranker→top-3↓70%KB token保留原文片段
推理链>5步中间步骤→结论摘要↓50%推理tokenHITL决策点必须保留完整推理
会话间记忆共享 & 隔离
场景策略安全约束示例
同用户·同Agent共享工作记忆PII不跨会话·D3仅摘要张伟第2次调查可看第1次画像摘要
同用户·不同Agent有限共享(Context Package)仅精炼摘要·不传递原始对话AML→Credit: 仅传递风险评分+证据链摘要
不同用户·同Agent严格隔离任何记忆不跨用户·审计独立张伟的调查记忆 ≠ 李芳的调查记忆
跨业务域禁止共享风控→零售禁止AML记忆不能被CS-Agent访问
团队级共享审批后共享需HITL L2·仅共享结论不含PII调查团队共享AML案例模式(不含客户信息)
记忆治理策略
治理规则适用范围执行策略审计要求
PII过期删除所有含PII记忆姓名/身份证: 24h强制删除 · 账号: 7天 · 金额: 30天删除操作记录WORM审计
D3跨租户阻断D3级所有记忆不允许跨部门传播·仅精炼摘要模式跨域访问→实时告警+阻断
记忆版本管理长期记忆(永久类)案例/红线: 版本管控·不可删除只可归档变更记录版本号+变更人+审批人
容量上限每个Agent长期≤10%·工作≤50%·临时≤40%超限自动触发衰减+清理
季度合规审查所有Agent记忆每季度审查: PII残留/D3越权/僵尸记忆审查报告归档银保监合规
🟢 Hot Pool
2
复用中
🟡 Warm Pool
3
执行中
❄ Cold Pool
5
空闲
📊 队列深度
8
正常
Manager Pod 实例
Pod ID状态会话数CPUMemory启动时间
mgr-pod-3a2fWarm1245%3.2G08:15
mgr-pod-7b1eWarm838%2.8G08:15
mgr-pod-9c4dHot05%1.2G07:45
mgr-pod-2f8aCold02%0.8G06:00
Executor Pod 实例
Pod ID类型状态Session当前 StepCPUGPU
exec-r-01ResearchWarmsess_8a3fStep 3/5: llm_call62%—
exec-r-02ResearchWarmsess_8a3fStep 2/4: mcp_tool35%—
exec-a-01AnalysisWarmsess_7b2cStep 4/6: llm_call78%45%
exec-c-01CodeIdle——3%—
exec-r-03ResearchCold——1%—
HPA 扩缩容事件
时间Pod 类型事件触发条件结果
09:32Research扩容 +2队列深度 > 50ReplicaSet: 5→7
08:00Manager预热 +1工作时间预热ReplicaSet: 3→4
22:00 (昨日)All缩容非工作时间缩至 min
纳管 Agent 列表
Agent 名称来源接入协议状态所属 Team纳管时间操作
信贷审批 Agent自研 LangGraphA2A (gRPC)在线信贷风控 Team2026-06-15
Claude Code 助手AnthropicMCP Server在线研发效能 Team2026-06-20
数据分析助手云厂商聊天室总线离线数据平台 Team2026-07-01
反洗钱调查 Agent自研 AgentScopeA2A (gRPC)在线合规审计 Team2026-07-05
纳管纳管配置 — 注册新 Agent
Agent Card 信息

权限与资源

🏆 Golden 数据集
4
人工审核基准
❌ BadCase 数据集
12
本周+3
📊 OnlineSample
8
Pipeline 自动
🚀 Pipeline 执行
156
成功率 98%
Dataset 列表
名称类型条数Schema来源更新操作
信贷审批 Golden v3Golden500{query, context, expect, judge}人工标注每日
反洗钱 BadCase 集BadCase230{trace_id, step, violation}Pipeline 自动实时
客服对话 在线采样OnlineSample1200{session, turns, sentiment}Pipeline 采样每小时
故障诊断 实验集Experiment300{alert, diagnosis, steps}手动导入手动
Pipeline 执行历史
Pipeline 名称触发方式处理条数输出 Dataset状态耗时
客服质量-每小时采样Cron: 0 */1 * * *10,000 → 300客服对话 在线采样成功12s
反洗钱 BadCase 识别实时触发5,000 → 200反洗钱 BadCase 集成功8s
信贷审批-周度评估Cron: 0 8 * * 150,000 → 500信贷审批 Golden v3运行中45s