[合肥-经开区]安徽亿创基业智能科技有限公司

职位：大语言模型（LLM）评测
发布时间：2026-10-24
工作地点：其它
信息来源：前程无忧(51JOB)
职位类型：全职
职位描述
专业1:软件技术
职能类别:自然语言处理(NLP)
负责大语言模型（LLM）端侧、云侧评测工作，不做传统业务系统开发：
1. 开展大模型复杂多轮对话测试、指令遵循能力评测，设计对抗性高难度评测用例；
2. 搭建标准化、可量化的模型评估体系，输出评测结论，保障模型输出质量；
3. 独立开发自动化评测脚本、评测辅助工具，参与自动化评估平台/工具建设；
4. 分析模型缺陷，沉淀评测方法、用例库，持续优化评测方案。
任职要求
硬性门槛
1. 本科及以上（可实习），计算机/软件相关专业；优先有LLM评测经验；计算机基础扎实但评测经验偏少可内部半天培训；开发经验丰富、评测经验少也可接受；
2. 具备前后端全栈基础，扎实编码、调试能力，可独立编写自动化评测脚本与工具；
3. 理解代码底层逻辑，不只是完成功能调用；
4. 会Go / C/C++ / Rust / Swift 至少一门编程语言；有Agent项目背景优先。
加分项
? 有大模型、多轮对话、指令遵循、对抗评测经验；
? 有Agent、智能体相关研发/测试经验；
? 熟悉LLM评测指标、数据集、自动化评测框架。 公司简要介绍：
公司名称:安徽亿创基业智能科技有限公司
公司类型:民营公司
公司规模:少于50人
公司介绍:安徽亿创基业智能科技有限公司，公司规模为少于50人，公司类型为民营公司，所属行业为电子商务