工程笔记
写给真正
交付技术栈的人
关于 React、Node.js、TypeScript 与 AI 的原创文章,来自与我们操作层软件同一套工程实践。正文为英文。
标签:Testing
谁来评估评估者?在信任这些评估工具之前,先对其进行验证。
谁来验证评估套件?评估标准的偏差、仅基于结果的评分方式、私有的故障模式以及隐藏的成本都可能导致大语言模型的评估结果失真。需要对该评估套件本身进行检验。
阅读约 7 分钟为何智能体在离线评估中全过,但在实际生产环境中仍会失败
六种漂移模式会逐渐使评估数据集过时。四轴追踪分数以及每周的聚类与提升循环,能确保置信区间真实反映实际在线流量情况。
阅读约 9 分钟智能测试为质量保证带来了哪些变化,以及它仍存在的不足之处。
当用户界面发生变化时,脚本化及自修复套件会失效。基于意图的浏览器代理可减少维护工作,但受约束的流程和复杂的用户界面仍需处理。
阅读约 7 分钟实用指南:构建可靠的AI智能体——生产环境评估方法
《实用指南:构建可靠的AI智能体——工程实践》的操作流程说明:针对采用该架构的团队,提供了生产环境评估、相关合同条款、检查清单以及可直接插入的代码模块。
阅读约 10 分钟选择Playwright还是浏览器代理?为何脚本自动化仍更具优势
Playwright脚本与MCP驱动的浏览器代理:脆弱性、确定性及成本,同一发票处理任务在两种方式下的表现,安全风险以及各自的适用场景。
阅读约 8 分钟稳定的前端浏览器测试:用户流程、断言与不稳定的测试用例
前端测试的实用方法:选择关键用户流程、编写结果断言、控制测试环境数据、减少测试不稳定问题,并审查由AI生成的Playwright测试。
阅读约 8 分钟借助旅行机器人对代理进行评估:结果与轨迹、门控机制以及pass^k。
用于评估代理的旅行预订实例:结果轴与轨迹轴、加权得分前的确定性门控、2x2矩阵以及pass@k与pass^k的对比。
阅读约 8 分钟实践中的代理人与技能评估:发展轨迹、评分者、pass^k标准及工具
如何评估智能体与技能:触发与执行组件、评分强度排序、精确度与召回率、pass@k与pass^k的区别、一个简单的Python工具包及实用选型。
阅读约 11 分钟基于ChromaDB与嵌入技术的多智能体平台语义检索
将企业多智能体平台转向真正的语义检索:基于词识别的分块技术、ChromaDB中的余弦距离、测试层以及下一个RetrievalAgent步骤。
阅读约 10 分钟
常见问题
关于这些文章
是。每篇都是为本站准备的英文原创改写。结构与代码跟随来源;正文重写并做过重合检查。
技术文先发英文,以保证代码与 API 名称准确。站点外壳提供全部九种语言。
草稿经编辑后进入发布队列。站点导入只收录新的或有变更的 slug,不会重复添加。
示例仅供说明。上线前请核对技术栈与许可。若需交付,请发来简报。