news 2026/6/9 21:34:50

.NET+AI | Agent | 自定义中间件(11)

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
.NET+AI | Agent | 自定义中间件(11)

MAF 中间件管道架构:企业级 Agent 的三层拦截体系

一句话简介

MAF 提供三层中间件架构,分别拦截 ChatClient 调用、Agent 运行和工具调用,实现日志、限流、权限等企业级横切关注点。


🎯 核心价值

  • 三层拦截:ChatClient 层、Agent Run 层、Function Invocation 层

  • 职责分离:每层处理不同粒度的横切关注点

  • 灵活组合:可独立或组合使用,按需配置


📝 三层中间件架构

各层职责对比

层级

拦截时机

典型用途

触发频率

Agent RunRunAsync()

调用

PII 过滤、Guardrails

每次 Agent 调用 1 次

ChatClient

LLM 调用

Token 统计、限流、缓存

每次 LLM 调用(可能多次)

Function

工具执行

日志、权限检查、Mock

每次工具调用


💻 实现方式

1. ChatClient 中间件

使用 MEAI 的DelegatingChatClientUse()方法:

var chatClient = AIClientHelper.GetDefaultChatClient() .AsBuilder() .Use(getResponseFunc: async (messages, options, innerClient, ct) => { Console.WriteLine($"📊 [ChatClient] 请求消息数: {messages.Count()}"); var response = await innerClient.GetResponseAsync(messages, options, ct); Console.WriteLine($"📊 [ChatClient] Token: {response.Usage?.TotalTokenCount}"); return response; }) .Build();

核心要点:

  • 🔧 拦截每次 LLM 调用

  • 🔧 可访问完整的请求和响应

  • 🔧 适用于监控、限流、缓存等场景


2. Agent Run 中间件

使用AgentBuilder.Use()添加:

var agent = chatClient.CreateAIAgent(instructions: "你是智能助手") .AsBuilder() .Use(async (messages, thread, options, innerAgent, ct) => { Console.WriteLine($"🛡️ [Agent Run] Pre-Run 检查"); var response = await innerAgent.RunAsync(messages, thread, options, ct); Console.WriteLine($"🛡️ [Agent Run] Post-Run 完成"); return response; }, null) .Build();

核心要点:

  • 🛡️ 包裹整个 Agent 执行流程

  • 🛡️ 适用于安全检查、审计日志

  • 🛡️ 每次RunAsync()只触发一次


3. Function Invocation 中间件

拦截工具函数的执行:

var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(async (agent, context, next, ct) => { Console.WriteLine($"🔧 [Function] 调用: {context.Function.Name}"); var result = await next(context, ct); Console.WriteLine($"🔧 [Function] 结果: {result}"); return result; }) .Build();

核心要点:

  • 🔧 拦截每个工具函数调用

  • 🔧 可修改参数或覆盖结果

  • 🔧 适用于权限检查、Mock 数据


🏢 企业级最佳实践

推荐的中间件组合

// 1️⃣ ChatClient 层:监控和性能 var chatClient = baseChatClient.AsBuilder() .Use(new TokenMonitoringMiddleware()) .Use(new RateLimitingMiddleware()) .Build(); // 2️⃣ Agent 层:安全和审计 var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(PIIFilterMiddleware, null) // PII 过滤 .Use(GuardrailsMiddleware, null) // 内容安全 .Use(FunctionLoggingMiddleware) // 工具日志 .Build();

各层职责建议

层级

推荐用途

ChatClient

Token 统计、限流、缓存、重试

Agent Run

PII 过滤、Guardrails、全局审计

Function

权限检查、调用日志、Mock 数据


🎯 总结

  • 三层架构:ChatClient、Agent Run、Function Invocation 各司其职

  • 洋葱模型:请求从外向内,响应从内向外

  • 灵活组合:根据需求选择合适的中间件层级

  • 企业级应用:安全检查最外层,性能优化靠内层


如需获取文章配套完整代码,可扫码咨询领取。👇

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 10:03:37

Realtek 8811CU驱动下载与安装指南:Windows 7无线网卡稳定配置方案

Realtek 8811CU驱动下载与安装指南:Windows 7无线网卡稳定配置方案 【免费下载链接】Realtek8811CU-21CU无线网卡驱动下载 Realtek 8811CU/8821CU无线网卡驱动专为Windows 7系统设计,支持802.11ac USB NIC,确保在AD-HOC模式下稳定运行。该驱动…

作者头像 李华
网站建设 2026/6/8 20:55:25

解放私域运营双手,这个管理系统让你告别账号切换噩梦

还在为多台设备间来回切换账号而手忙脚乱吗?你是否知道,许多私域团队每月因账号管理混乱,导致客户响应延迟、线索遗漏,白白损失大量潜在客源?如果你也深耕私域运营,那么这款专为高效管理而生的私域系统&…

作者头像 李华
网站建设 2026/6/9 20:41:56

Xinference中Qwen3-Reranker模型GPU部署终极指南:从显存异常到性能优化

在AI模型部署的实践中,Qwen3-Reranker系列模型因其出色的重排序能力而备受关注。然而,许多开发者在Xinference框架下进行GPU部署时,常常会遇到模型运行在CPU上或显存占用异常高的问题。本文将为您提供一套完整的解决方案,帮助您轻…

作者头像 李华
网站建设 2026/5/22 6:52:27

Langchain-Chatchat能否支持视频音频转文字问答?扩展思路

Langchain-Chatchat能否支持视频音频转文字问答?扩展思路 在企业知识管理的日常实践中,一个常见的痛点逐渐浮现:大量关键信息被“锁”在会议录音、培训录像和客户访谈视频中。这些音视频资料承载着丰富的语义内容,却因缺乏有效的…

作者头像 李华
网站建设 2026/6/10 2:01:38

嵌入式Web服务器性能突破:Mongoose如何在10KB内存下实现万级并发

嵌入式Web服务器性能突破:Mongoose如何在10KB内存下实现万级并发 【免费下载链接】mongoose Embedded Web Server 项目地址: https://gitcode.com/gh_mirrors/mon/mongoose 当你的嵌入式设备需要处理海量网络请求时,是否曾因内存不足而束手无策&a…

作者头像 李华