跳到正文

#评测/基准

  1. AWS Machine Learning Blog

    AWS 对比 SFT 与 GRPO,演示多语言推理微调

    教程基于 GPT-OSS-20B 与 SageMaker HyperPod,比较监督微调和 GRPO 在推理语言一致性上的作用。文中的提升来自特定数据和评测,适合学习实验设计与路线选择。

    推荐理由:Codex 来源核对 · 原始技术资料,附实现与评估入口。

  2. Hugging Face Blog

    Ai2 发布 FairStress,测量模型决策过程中的公平性

    新基准将关注点从最终选择扩展到决策稳定性,研究在人口属性变化时模型是否同样坚持正确判断。作者公开报告、数据与代码,适合负责模型评估的团队研究。

    推荐理由:Codex 来源核对 · 原始技术资料,附实现与评估入口。

  1. Hugging Face Blog

    IBM 研究用可学习记忆改善客服智能体表现

    ALTK-Evolve 让智能体学习并复用操作指南,在不更新基础模型权重的情况下改善客服基准表现。文章同时讨论额外 token 成本与不同业务领域的指导强度,避免只看榜单结果。

    推荐理由:Codex 来源核对 · 原始技术资料,附实现与评估入口。

  2. OpenAI News

    Terminal X 用评测智能体检查投资分析,披露 88.6% 判断一致率

    据 OpenAI 发布的 Terminal X 案例,其评测智能体按照 54 项标准检查输出,在 500 次判断中与资深人工评审的一致率为 88.6%。这些是企业披露的内部评测结果,不代表通用投资表现或收益保证。

    推荐理由:Codex 来源核对 · 有具体任务、样本与评测口径的 AI 产品案例,数据未经本站独立复测。

  1. OpenAI News

    OpenAI 发布低资源编程语言评测,关注 COBOL 与 SQLite

    OpenAI 介绍为低资源语言补充的软件工程评测,涵盖旧系统迁移与数据库任务。文章提供比较模型的方法,适合维护遗留系统的团队评估;评测成绩仍需用自家代码验证。

    推荐理由:Codex 来源核对 · 原始技术资料,附实现与评估入口。

  1. AWS Machine Learning Blog

    AWS 发布智能体全生命周期评估框架实践

    文章用九阶段框架覆盖从提交代码到生产运行的智能体评估,特别关注延迟正常但回答质量下降的静默回归。可借鉴测试数据、评估检查和线上监控的衔接方法。

    推荐理由:Codex 来源核对 · 原始技术资料,附实现与评估入口。

  1. NVIDIA Blog

    NVIDIA 扩展 Nemotron 家族,发布 Super VL 与端侧 Bolt 模型

    NVIDIA 官方介绍新的开放模型,覆盖持续运行的智能体、多模态理解和本地推理。选择时应结合模型许可、显存要求及自己的任务测试,官方基准不能替代部署验证。

    推荐理由:Codex 来源核对 · 按原文范围整理,保留案例及数据的适用边界。

已经到底了
神灯AI热点 静态阅读版 · 导出于 2026-10-21T13:33:14.294Z · 页面日期以各期原始出刊时间为准。阅读、报告切换和往期导航可用;实时搜索、后台、收藏与反馈表单需动态服务。联系站长 ↗