山西网站建设网站建设工具

河北潭奥废旧物资回收有限公司 2026/09/09 17:50:11

MAF 中间件管道架构:企业级 Agent 的三层拦截体系

一句话简介

MAF 提供三层中间件架构,分别拦截 ChatClient 调用、Agent 运行和工具调用,实现日志、限流、权限等企业级横切关注点。


🎯 核心价值

  • 三层拦截:ChatClient 层、Agent Run 层、Function Invocation 层

  • 职责分离:每层处理不同粒度的横切关注点

  • 灵活组合:可独立或组合使用,按需配置


📝 三层中间件架构

各层职责对比

层级

拦截时机

典型用途

触发频率

Agent RunRunAsync()

调用

PII 过滤、Guardrails

每次 Agent 调用 1 次

ChatClient

LLM 调用

Token 统计、限流、缓存

每次 LLM 调用(可能多次)

Function

工具执行

日志、权限检查、Mock

每次工具调用


💻 实现方式

1. ChatClient 中间件

使用 MEAI 的DelegatingChatClientUse()方法:

var chatClient = AIClientHelper.GetDefaultChatClient() .AsBuilder() .Use(getResponseFunc: async (messages, options, innerClient, ct) => { Console.WriteLine($"📊 [ChatClient] 请求消息数: {messages.Count()}"); var response = await innerClient.GetResponseAsync(messages, options, ct); Console.WriteLine($"📊 [ChatClient] Token: {response.Usage?.TotalTokenCount}"); return response; }) .Build();

核心要点:

  • 🔧 拦截每次 LLM 调用

  • 🔧 可访问完整的请求和响应

  • 🔧 适用于监控、限流、缓存等场景


2. Agent Run 中间件

使用AgentBuilder.Use()添加:

var agent = chatClient.CreateAIAgent(instructions: "你是智能助手") .AsBuilder() .Use(async (messages, thread, options, innerAgent, ct) => { Console.WriteLine($"🛡️ [Agent Run] Pre-Run 检查"); var response = await innerAgent.RunAsync(messages, thread, options, ct); Console.WriteLine($"🛡️ [Agent Run] Post-Run 完成"); return response; }, null) .Build();

核心要点:

  • 🛡️ 包裹整个 Agent 执行流程

  • 🛡️ 适用于安全检查、审计日志

  • 🛡️ 每次RunAsync()只触发一次


3. Function Invocation 中间件

拦截工具函数的执行:

var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(async (agent, context, next, ct) => { Console.WriteLine($"🔧 [Function] 调用: {context.Function.Name}"); var result = await next(context, ct); Console.WriteLine($"🔧 [Function] 结果: {result}"); return result; }) .Build();

核心要点:

  • 🔧 拦截每个工具函数调用

  • 🔧 可修改参数或覆盖结果

  • 🔧 适用于权限检查、Mock 数据


🏢 企业级最佳实践

推荐的中间件组合

// 1️⃣ ChatClient 层:监控和性能 var chatClient = baseChatClient.AsBuilder() .Use(new TokenMonitoringMiddleware()) .Use(new RateLimitingMiddleware()) .Build(); // 2️⃣ Agent 层:安全和审计 var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(PIIFilterMiddleware, null) // PII 过滤 .Use(GuardrailsMiddleware, null) // 内容安全 .Use(FunctionLoggingMiddleware) // 工具日志 .Build();

各层职责建议

层级

推荐用途

ChatClient

Token 统计、限流、缓存、重试

Agent Run

PII 过滤、Guardrails、全局审计

Function

权限检查、调用日志、Mock 数据


🎯 总结

  • 三层架构:ChatClient、Agent Run、Function Invocation 各司其职

  • 洋葱模型:请求从外向内,响应从内向外

  • 灵活组合:根据需求选择合适的中间件层级

  • 企业级应用:安全检查最外层,性能优化靠内层


如需获取文章配套完整代码,可扫码咨询领取。👇

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈,一经查实,立即删除!

专业网站建设泰州网站建设

模型微调是针对base模型的一种局部调整,让模型可以按照你想要的输出内容方式输出内容。从我们日常应用的角度来讲,模型微调其实主要起到两个用处(个人理解

2026/06/30 10:15:49

松原网站建设上海网站建设的

快速体验打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容:创建一个极简Docker镜像源快速配置工具,只需选择镜像源提供

2026/06/30 13:13:04

济南营销型网站建设山西网站建设

目录红黑树的概念红黑树的规则红黑树的效率红黑树的实现红黑树的插入情况1:变色情况2:单旋+变色情况2:双旋+变色为什么这三种情况能覆盖所有插入

2026/06/30 10:40:21

东莞手机网站建设陕西网站建设

从零开始掌握Vitis + Alveo:软硬协同加速开发实战指南你是否曾为深度学习推理延迟过高而头疼?是否在数据库查询中被CPU算力瓶颈卡住手脚?又或

2026/06/30 11:43:57

南昌网站建设公司黄浦网站建设

第一章:揭秘Open-AutoGLM部署难题:3大核心步骤让你效率提升10倍在部署 Open-AutoGLM 这类大型语言模型时,开发者常面临环境依赖复杂、推

2026/06/30 11:34:56

医疗网站建设荆门网站建设

Excalidraw 数据库选型建议(SQLite vs PostgreSQL)在现代团队协作中,可视化工具早已不再是“锦上添花”,而是项目推进

2026/06/30 13:57:38

招商网站建设深圳网站建设论坛

Python 提供了丰富且灵活的内置数据结构,用于高效地组织、存储和操作数据。这些数据结构可分为**可变(mutable)与不可变(immuta

2026/06/30 13:15:35

诸城网站建设衡阳网站建设

2026必备10个降AIGC工具,本科生必看!AI降重工具:论文写作的“隐形助手”随着人工智能技术的飞速发展,AIGC(AI生成内

2026/06/30 11:30:26

杭州网站建设六安网站建设

typescript学习要点总结已思考(用时 10 秒)根据用户请求,我需要总结TypeScript的学习要点。TypeScript是JavaScript的超

2026/06/30 13:57:08

北海网站建设襄樊网站建设

城通网盘极速下载实战指南:3种场景下的高效解决方案【免费下载链接】ctfileGet获取城通网盘一次性直连地址项目地址: https://gitcode.com/gh_mirrors/c

2026/06/30 13:14:35