微软 StudentSim:用个性化学生模拟器在真实学习者之前评估 AI 辅导
微软研究院推出 StudentSim,一种在真实学习者测试前评估和改进 AI 辅导系统的研究系统,它基于公开的去标识化学习记录训练个性化学生模拟器,每个模拟器对应一名学生。
微软研究院推出 StudentSim,一种在真实学习者测试前评估和改进 AI 辅导系统的研究系统,它基于公开的去标识化学习记录训练个性化学生模拟器,每个模拟器对应一名学生。
Microsoft 的 Jennifer Neville 在 Microsoft Research Podcast 中与 Chad Atalla 对谈,讨论评估如何推动当前 AI 系统突破性能边界,以及模型在传统 benchmark 之外测试时出现的"意外失败"。她结合自身从数学、物理、认知科学到计算机科学的经历,分享使用当前 AI 系统的实用建议,并强调当结果偏离预期时应仔细审视数据。
GitHub 发布 ReviewBench,一个面向 AI 代码审查智能体的开放离线基准,基于 1.039 亿个 GitHub pull request 的分布特征构建,包含来自 187 个开源仓库、覆盖 19 种语言的 219 个 pull request。
推荐理由:GitHub 公开了代码审查基准的构建方法与评测口径,读者可据此理解 AI 代码审查能力如何被量化比较。