OpenAI 推出 BioBasicsBench:衡量 AI 智能体处理日常湿实验科学的能力
OpenAI 推出 BioBasicsBench,一个包含 100 项任务的基准,用于衡量 AI 智能体解读原始实验数据和处理日常湿实验科学的能力。该基准聚焦智能体在真实实验场景中的表现,而非仅考察知识问答。
OpenAI 推出 BioBasicsBench,一个包含 100 项任务的基准,用于衡量 AI 智能体解读原始实验数据和处理日常湿实验科学的能力。该基准聚焦智能体在真实实验场景中的表现,而非仅考察知识问答。
微软构建 Industry Evaluation Data Generation Platform,用基于 O*NET、招聘信息和 SEC 文件等公开数据生成的全合成企业环境来评估 Microsoft Copilot。
GitHub 发布 AI 代码审查开放基准 ReviewBench,基于 1.039 亿个 GitHub PR 的分布构建 219 个公开 PR 语料,覆盖 19 种语言。
推荐理由:GitHub 公开了基准的构建方法、评分规则和人工一致性数据,读者可据此判断 AI 代码审查评测的可信度。