Community编程与开发github.com

zhuwujing28-del/agent-evals-cn

???? AI Agent / Codex 技能评测中文版????

agent-evals-cn 是什么?

这是一个针对 AI Agent 和 Codex 等平台的中文评测技能。它提供了结构化的测试用例和评估方法,用于衡量 AI 编码助手在中文语境下的代码生成、理解和修正能力。该技能支持 Claude Code、Cursor、Codex 等主流工具,通过定义标准化的评测任务(如代码补全、调试、重构等),帮助开发者客观评估不同 AI 模型的性能。使用此技能,开发者可以快速获得 AI 助手在中文自然语言与代码交互场景下的表现数据,从而优化提示策略或选择最适合的模型。

兼容平台~Claude Code✓Codex CLI~Cursor
npx skills add zhuwujing28-del/agent-evals-cn

Installed? Explore more 编程与开发 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

在你喜欢的 AI 中提问

打开一个已预加载此 Agent Skill 的新对话。

文档

agent-evals-cn 是做什么的?

这是一个用于评测 AI Agent / Codex 等工具的中文技能。

功能描述

该技能提供了一系列针对中文编程场景的评测任务,包括:

  • 中文注释理解
  • 中文需求翻译为代码
  • 代码错误修复(中文错误信息)
  • 中文变量名合理性检查

使用场景

可以在以下平台使用:

  • Claude Code
  • Cursor
  • Codex
  • 其他兼容的 AI 编码助手

使用方法

  1. 加载该技能到你的 AI Agent 中
  2. 运行评测命令:eval <task-id>
  3. 查看评测结果输出

评测标准

评分项权重说明
代码正确性40%生成的代码是否正确
中文适配度30%中文需求理解和表达
效率30%完成任务的速度

注意事项

  • 确保 AI 模型支持中文输入输出
  • 建议在隔离环境中运行评测,避免影响实际代码库

相关技能