网站建设策划书邢台网站建设

厦门宇添科技有限公司 2026/09/09 18:34:36

MAF 中间件管道架构:企业级 Agent 的三层拦截体系

一句话简介

MAF 提供三层中间件架构,分别拦截 ChatClient 调用、Agent 运行和工具调用,实现日志、限流、权限等企业级横切关注点。


🎯 核心价值

  • 三层拦截:ChatClient 层、Agent Run 层、Function Invocation 层

  • 职责分离:每层处理不同粒度的横切关注点

  • 灵活组合:可独立或组合使用,按需配置


📝 三层中间件架构

各层职责对比

层级

拦截时机

典型用途

触发频率

Agent RunRunAsync()

调用

PII 过滤、Guardrails

每次 Agent 调用 1 次

ChatClient

LLM 调用

Token 统计、限流、缓存

每次 LLM 调用(可能多次)

Function

工具执行

日志、权限检查、Mock

每次工具调用


💻 实现方式

1. ChatClient 中间件

使用 MEAI 的DelegatingChatClientUse()方法:

var chatClient = AIClientHelper.GetDefaultChatClient() .AsBuilder() .Use(getResponseFunc: async (messages, options, innerClient, ct) => { Console.WriteLine($"📊 [ChatClient] 请求消息数: {messages.Count()}"); var response = await innerClient.GetResponseAsync(messages, options, ct); Console.WriteLine($"📊 [ChatClient] Token: {response.Usage?.TotalTokenCount}"); return response; }) .Build();

核心要点:

  • 🔧 拦截每次 LLM 调用

  • 🔧 可访问完整的请求和响应

  • 🔧 适用于监控、限流、缓存等场景


2. Agent Run 中间件

使用AgentBuilder.Use()添加:

var agent = chatClient.CreateAIAgent(instructions: "你是智能助手") .AsBuilder() .Use(async (messages, thread, options, innerAgent, ct) => { Console.WriteLine($"🛡️ [Agent Run] Pre-Run 检查"); var response = await innerAgent.RunAsync(messages, thread, options, ct); Console.WriteLine($"🛡️ [Agent Run] Post-Run 完成"); return response; }, null) .Build();

核心要点:

  • 🛡️ 包裹整个 Agent 执行流程

  • 🛡️ 适用于安全检查、审计日志

  • 🛡️ 每次RunAsync()只触发一次


3. Function Invocation 中间件

拦截工具函数的执行:

var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(async (agent, context, next, ct) => { Console.WriteLine($"🔧 [Function] 调用: {context.Function.Name}"); var result = await next(context, ct); Console.WriteLine($"🔧 [Function] 结果: {result}"); return result; }) .Build();

核心要点:

  • 🔧 拦截每个工具函数调用

  • 🔧 可修改参数或覆盖结果

  • 🔧 适用于权限检查、Mock 数据


🏢 企业级最佳实践

推荐的中间件组合

// 1️⃣ ChatClient 层:监控和性能 var chatClient = baseChatClient.AsBuilder() .Use(new TokenMonitoringMiddleware()) .Use(new RateLimitingMiddleware()) .Build(); // 2️⃣ Agent 层:安全和审计 var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(PIIFilterMiddleware, null) // PII 过滤 .Use(GuardrailsMiddleware, null) // 内容安全 .Use(FunctionLoggingMiddleware) // 工具日志 .Build();

各层职责建议

层级

推荐用途

ChatClient

Token 统计、限流、缓存、重试

Agent Run

PII 过滤、Guardrails、全局审计

Function

权限检查、调用日志、Mock 数据


🎯 总结

  • 三层架构:ChatClient、Agent Run、Function Invocation 各司其职

  • 洋葱模型:请求从外向内,响应从内向外

  • 灵活组合:根据需求选择合适的中间件层级

  • 企业级应用:安全检查最外层,性能优化靠内层


如需获取文章配套完整代码,可扫码咨询领取。👇

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈,一经查实,立即删除!

免费建设网站黄浦网站建设

Verl项目作为火山引擎推出的强化学习框架,通过集成LoRA技术为大型语言模型的微调带来了突破性的效率提升。在这篇文章中,我们将深入探讨LoRA如何解决传统强化学习训练中的

2026/06/30 13:11:04

网站建设步骤咸宁网站建设

揭秘kkFileView:5步实现企业文档数字化管理效率倍增的实战指南【免费下载链接】kkFileViewUniversal File Online Preview Project ba

2026/06/30 11:50:27

建设厅网站恩施网站建设

这是一个关于机器人学习的故事,而且它的灵感来自一个看似简单但深刻的观察:小孩子是如何学会拿东西的。想象一个婴儿坐在地板上,周围散放着各种玩具。他不是一开始就能

2026/06/30 14:20:09

濮阳网站建设湛江网站建设

教育领域定制教学助手:基于lora-scripts的LLM微调实践在今天的智能教育探索中,一个现实问题反复浮现:为什么我们手握强大的大语言模型,

2026/06/30 12:05:59

合肥网站建设网站建设空间

Paperzz-AI官网免费论文查重复率AIGC检测/开题报告/文献综述/论文初稿paperzz - AI PPT制作https://www.paperzz.cc/aiPpt你是否有过这样的经历&#x

2026/06/30 13:27:05

网站建设规划南充网站建设

深夜急救:论文卡壳?AI率超标?24小时内搞定的7款神器清单凌晨2点,你盯着屏幕上的论文初稿发呆——导师批注里“逻辑混乱”“AI痕迹过重”的红色

2026/06/30 12:24:31

律师网站建设牡丹江网站建设

HuLa即时通讯应用:3个核心功能让跨平台沟通如此简单【免费下载链接】HuLa🍀 HuLa is a desktop instant messaging app buil

2026/06/30 10:39:21

衡阳网站建设淮北网站建设

快速体验打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容:开发一个面向初学者的STM32CubeMX入门教程,包含&#x

2026/06/30 12:11:30