1. 设计和实施大模型的评测方案，包含但不局限于准确率、鲁棒性、性能测试以及制定各种评测指标，对大模型进行全面评估，确保模型产品在不同的场景下的表现符合业务预期。 2. 与产品、研发、业务部门紧密合作，了解业务需求，确保智能体、模型评测方案的有效性。 3. 分析评测结果，识别智能体、模型瓶颈与不足，提出优化方案，协助提升准确率与响应速度。 4. 跟踪最新评测方法，参与开发AI大模型相关的评测框架，提高评测效率和准确率； 5. 与团队成员进行有效沟通，促进团队的进步和成长。

1.本科及以上学历，计算机科学、人工智能、大数据等相关专业，有1年及以上AI大模型测试经验优先。 2.至少掌握Python 、Java 一种高级编程语言，熟悉LLM,VLM评测方案，有丰富模型评测经验，熟悉评测指标和方法，熟悉大模型技术栈（如Transformer、RLHF）。 3.良好的团队合作精神，对新技术高度敏感，乐于接受挑战，共同推动项目成功。