Agent 评估与优化三城巡演丨北京站精彩回顾 & PPT 下载

简介: Agent 评估与优化 · Close the Loop 三城巡演首站北京站圆满落幕。本场活动联合 Dify 举办,吸引了近百名技术从业者参与,围绕“Observe / 观测与审计”这一主题,深度分享了 Agent 可观测性范式、Dify 可解释性实践、AI Coding 观测与降本等议题,并设置了 AgentLoop 动手实操环节。

今天,Agent 评估与优化 · Close the Loop 三城巡演首站北京站圆满落幕。


本场活动联合 Dify 举办,吸引了近百名技术从业者参与,围绕“Observe / 观测与审计”这一主题,深度分享了 Agent 可观测性范式、Dify 可解释性实践、AI Coding 观测与降本等议题,并设置了 AgentLoop 动手实操环节。

image.png

关注「阿里云云原生」公众号,后台回复:Loop0821

获取北京站讲师 PPT 合辑

议题一:Agent 评估与优化全景

分享嘉宾: 阿里云 Agentloop 产品经理 涯海


从企业 Agent 落地的六大挑战“看不清、评不准、存不下、改不动、控不住、复制难”开始,提出从 LLMOps 到 AgentOps 的范式升级:治理对象从单次调用变为完整推理轨迹 Trajectory,以“观测→评估→优化→回测”为主线构建数据飞轮:零代码插桩覆盖约 45 个框架,Agent-as-a-Judge 评估与专家一致性达 90%+,归因分析把评分转译为改进动作,变更门禁拦截负向变更。举例了 某游戏客户 3 天跑通优化闭环、客服质检覆盖率从 5% 升至 100%:谁的飞轮转得快,Agent 就越聪明。

议题二:Dify 如何让 Agent 的每一步可解释、可比较和可验证

分享嘉宾: Dify 工程师 姜涵煦


涵煦分享了在 Agent 编排平台侧的可观测实践:如何让开发者在可视化工作流中看清每个节点的输入输出与耗时,让不同版本的 Agent 编排可以横向比较,让每一次改动的效果可以被验证而非感觉变好了。

议题三:AI Coding 的观测和科学降本实践

分享嘉宾: 阿里云 Agentloop 研发工程师 马云雷


AI Coding 是当前 Token 消耗最大、调用链最深的 Agent 场景之一。本议题基于真实 AI Coding 场景,分享了两个问题的解法:一是怎么看清调用链,从一次编码任务出发,还原模型调用、工具执行、上下文组装的完整链路,定位耗时与失败点;二是怎么把成本科学地降下来,基于观测数据识别冗余调用与低效上下文,在不牺牲任务完成质量的前提下压缩 Token 开销。

动手实操:给 Coding Agent 或其他桌面端 Agent 接入AgentLoop

通过 LoongSuite Pilot 将开发者本机的 AI Coding Agent 运行数据接入 AgentLoop,实现会话、模型调用、工具调用、Token 用量和 Trace 数据的统一观测与分析。


实操文档: https://help.aliyun.com/zh/document_detail/3033878.html

现场花絮

Agent 观测与优化 Close the Loop 巡回沙龙,8月29日深圳站将联合 AgentScope 分享“Evaluate / 评估与实验”,9月4日上海站联合 LangChain 分享“Optimize / 进化”。


报名审核制,审核通过将收到短信通知。

相关文章
|
22天前
|
消息中间件 存储 人工智能
免费送 10 张三天通票!邀你共赴 ApacheCon 2026
Community Over Code 是 Apache 软件基金会(ASF)官方全球系列大会,今年,Community Over Code Asia 2026 将于 8 月 7-9 日在北京市海淀区中关村国家自主创新示范区会议中心举行,覆盖 AI、云原生、大数据、开源社区治理等热点领域。阿里云云原生应用平台团队将携手开源社区贡献者和用户们,在消息、微服务、Web 应用与框架三大领域带来 11 个议题,欢迎大家报名参加。关注阿里云云原生公众号,在本文章评论区留言回复 ASFC+你想听的议题,前 10 名参与互动的用户将获得大会三天通票一张(价值 999 元)。
|
22天前
|
人工智能 运维 Linux
凌晨告警不再慌!SysOM 巡检 Skill 一键锁定根因
凌晨两点被叫醒,还要花 40 分钟拼出根因?阿里云操作系统控制台发布的 SysOM 巡检 Skill,沉淀了内核专家的排查经验,37 秒即可生成报告,巡检发现问题后自动衔接诊断、精准定位根因。目前 SysOM 巡检 Skill 已开源,一行命令即可立即上手,欢迎体验。
|
1月前
|
人工智能 缓存 运维
AI 网关 FinOps 最佳实践:如何为不同消费者控制 AI 调用预算
本文面向 AI 网关使用者,帮助您建立一套完善的消费者 AI FinOps 治理体系。
240 11
|
29天前
|
消息中间件 SQL 存储
|
人工智能 数据库
阿里云数据库Agentic DB Day,本周六深圳见
阿里云数据库首场 Agentic DB Day · 深圳 ——讲一个不蹭热点、但所有 AI 应用都绕不开的话题:当数据库长成 Agentic 形态!
JavaScript API 开发工具
141 3
人工智能 API 定位技术
54 1
人工智能 编解码 开发者
22 2
监控 网络协议 API
59 2
XML 人工智能 前端开发
226 0

热门文章

最新文章