模型&Agent评测系统工程师

岗位职责： 1、负责模型&Agent通用评测平台系统，评测框架设计、功能开发等。 2、设计构建bmk，参与包括评测集构建、pipeline搭建，推动bmk往自动化评测转化。 3、设计构建各类Agent执行环境，包括工具调用、测试与结果验证等。 4、改进优化评测平台和框架，提升评测稳定性和复测效率。 5、与算法深度协作，解决各类评测问题，构建各类数据生产工具等。 岗位要求: 1、本科以上学历，计算机等相关专业，有3年及以上前后端开发经验。 2、扎实的软件工程能力，熟练掌握 Python、Go、Java、TypeScript等开发语言，精通至少一种，具备全栈开发能力。 3、熟练掌握各类开发语言生态框架、中间件应用等，具备一定架构设计能力，能够合理利用各类技术框架、组件、工具解决技术问题。 4、负责或参与过评测类平台、框架的设计开发，有一定Agent开发经验， LLM evaluation / benchmark 构建经验。 5、有大模型、算法工程相关工作经历，有较强自驱力，能够独立负责和解决问题。 6、有开源项目或参与过开源项目经验优先，熟练应用各类Agent，具备AI native思维。