首页
学习
活动
专区
圈层
工具
发布
首页标签模型测试

#模型测试

Agent 评测方法、工具和指标体系

质量保障小乔

Agent 评测不能只看“最终回答对不对”,而要同时评估:是否正确理解任务、规划是否合理、工具是否正确调用、环境状态是否真正改变、失败时是否恢复、安全边界是否守...

900

LLM / RAG / Agent 的评估工具

质量保障小乔

LLM RAG Agent 三类场景的评估工具对比,按“工具→定位→核心能力→适用场景”结构化呈现。

900

HAR文件如何辅助RAG评测

质量保障小乔

HAR(HTTP Archive),是W3C事实标准的HTTP会话存档文件,本质是JSON格式,完整记录一次会话下全部HTTP/HTTPS请求与响应全量数据。

400

大模型推理加速Medusa详解:单模型多头并行解码,解决投机解码双模型部署痛点20.1

未闻花名

在深入拆解 Medusa 技术之前,我们先铺垫一个业界主流的大模型提速方案"投机解码"。相信看过前文的朋友都清楚,投机解码核心是Draft-Target 双模型...

18110

本地大模型落地医疗场景:Qwen3-32B与ChatGLM3-6B高血压慢病筛查实战测评19.9

未闻花名

做本地大模型部署调试这段时间,直观感受真的是一山更比一山高。最开始落地医疗场景AI项目,我一直用的是ChatGLM3-6B,日常的语义对话、简单信息解读都很流畅...

12610

qModel 算法模型平台开源版 v1.4.0 升级:新增模型 API 服务与计算任务全流程管理能力

吴同

在这一过程中,模型训练完成只是应用链路的起点,如何实现模型服务化部署、计算任务管理、运行状态监控以及结果分析,成为算法工程化落地过程中需要重点解决的问题。

8600

分层配额显存共享方案:RTX4090运行ChatGLM2/3双模型,显存池化应用实践19.4

未闻花名

本地私有化部署ChatGLM系列模型是比较普遍的落地场景,实际过程中也必定会碰到一个硬性资源瓶颈:一张24G的 RTX4090 显卡,原生框架只能串行加载Cha...

19910

为什么AI时代,测试工程师必须补齐算法能力?

霍格沃兹-测试开发学社

一份 SKILL.md,配上脚本、工具声明和领域知识,就能让 Agent 获得一项相对完整的能力:代码审查、依赖升级、数据分析、发布计划、故障排查、测试执行……

13110

AI Agent测试中的DFS和BFS:测试工程师为什么需要理解搜索算法?

霍格沃兹-测试开发学社

13500

qModel 算法模型平台开源版 v1.3.0 新增模型审批能力,完善算法模型从接入到上线的治理流程

吴同

但随着模型类型增多、使用人员扩大,仅依靠人工确认或直接发布的方式,容易出现: 模型上线缺少统一审核节点;发布申请信息不完整;模型变更过程难以追踪;审核结果缺少记...

4500

开源多模态视觉模型图像地理推理驱动定向社会工程攻击研究

芦笛

中国互联网络信息中心 | 工程师 (已认证)

针对 2026 年 7 月 McAfee 与 KnowBe4 披露的新型网络威胁,本文系统研究开源视觉语言模型(VLM)基于社交平台公开旅游照片实现无元数据地理...

14410

2026 技术观察:MLOps 进入模型治理阶段,版本管理、漂移监测和灰度回滚成为 AI 生产新底座

用户12583401

过去,很多团队更关注模型能不能训练出来、指标是否足够高、能不能部署到线上。但当模型真正进入生产环境后,新的问题会持续出现。

28910

大语言模型幻觉驱动幻影域名抢注(Phantom Squatting)攻击机理与分层防御技术研究

芦笛

中国互联网络信息中心 | 工程师 (已认证)

生成式大语言模型(LLM)普遍存在事实幻觉缺陷,模型会自主生成不存在、符合语义逻辑的域名地址。攻击者利用该稳定幻觉特征,提前注册此类虚构域名并部署仿冒站点实施钓...

24610

2026技术观察:AI 服务网关加速普及,多模型调用开始进入统一路由时代

用户12583401

2026 年,AI 应用不再只依赖单一模型。一个真实系统里,可能同时使用大语言模型、Embedding 模型、图像模型、语音模型和本地小模型。不同模型有不同价格...

23710

WorkBuddy 全模型使用指南:31 条管线的高效驾驭

nexlo

五渠道、三阵营、一张表。从如何选到如何配,本文是 WorkBuddy 模型体系的完整索引。

2.9K10
领券