主分类:AI模型评测工程
来源 JD 数据(旧分类保留,当前主分类见上方)
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "大模型/Agent评测工程师-剪映",
"job_level": "未披露",AI生成
"work_category": "全职",AI生成
"department": "未披露",
"location": "深圳",
"work_mode": "未披露",AI生成
"job_category": "研发"AI生成
},
"company": {
"company_name": "字节跳动",
"company_industry": "互联网 / 数字内容 / 电商",
"company_size": "10000人以上",
"company_website": "bytedance.com",
"company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": "",
"degree": "本科及以上学历",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "1、通用评测体系建设:包括评测标准,评测集,评估能力,评测结果分析与归因等系列能力建设,跟踪前沿评测技术与Benchmark趋势,开展技术调研与创新实践,推动评测体系升级;\n2、评测分析:基于评测结果进行分析与诊断,挖掘模型或Agent在推理、规划、工具调用、代码执行等环节的问题,并输出改进建议。",
"requirements_text": "1、本科及以上学历,计算机科学、人工智能、软件工程等相关专业;\n2、对主流大模型的原理、能力边界及典型应用场景有较深入理解,熟悉大模型与Agent的常见评测方法;\n3、具备良好的工程基础,能够参与或主导评测框架、工具或平台的设计与实现;\n4、具备良好的业务理解能力、沟通与协作能力,能够与算法、产品、运营、研发团队高效协作,有技术判断力,逻辑思维清晰,学习能力强,能够推动评测体系在业务中的落地;\n5、坦诚清晰、积极乐观,责任心强、有主人翁意识,工作认真细致严谨,热爱技术,有较强的学习能力,有强烈的求知欲、好奇心和进取心,能及时关注和学习业界最新技术,对解决挑战性问题充满激情。\n\n加分项:\n1、对大模型技术及其应用有浓厚兴趣,有Agent及大模型评测体系建设经验、熟悉大模型训练、或熟悉LLM-as-a-Judge相关经验者优先;\n2、有Agent在复杂业务场景的落地经验或多Agent系统设计经验的优先;\n3、积极参与开源社区,有相关贡献者优先。",
"skills": [AI生成
"模型训练",
"逻辑思维",
"学习能力",
"大语言模型"
],
"preferred_qualifications": "加分项:;1、对大模型技术及其应用有浓厚兴趣,有Agent及大模型评测体系建设经验、熟悉大模型训练、或熟悉LLM-as-a-Judge相关经验者优先;2、有Agent在复杂业务场景的落地经验或多Agent系统设计经验的优先;3、积极参与开源社区,有相关贡献者优先",
"job_highlights": "未披露"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://jobs.bytedance.com/experienced/position/7642653985177864501/detail"
}
]
},
"posting": {
"posting_id": "7642653985177864501",
"post_date": "2026-05-22",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://jobs.bytedance.com/experienced/position/7642653985177864501/detail"
},
"fulltext": "大模型/Agent评测工程师-剪映\n职位描述\n1、通用评测体系建设:包括评测标准,评测集,评估能力,评测结果分析与归因等系列能力建设,跟踪前沿评测技术与Benchmark趋势,开展技术调研与创新实践,推动评测体系升级;\n2、评测分析:基于评测结果进行分析与诊断,挖掘模型或Agent在推理、规划、工具调用、代码执行等环节的问题,并输出改进建议。\n\n职位要求\n1、本科及以上学历,计算机科学、人工智能、软件工程等相关专业;\n2、对主流大模型的原理、能力边界及典型应用场景有较深入理解,熟悉大模型与Agent的常见评测方法;\n3、具备良好的工程基础,能够参与或主导评测框架、工具或平台的设计与实现;\n4、具备良好的业务理解能力、沟通与协作能力,能够与算法、产品、运营、研发团队高效协作,有技术判断力,逻辑思维清晰,学习能力强,能够推动评测体系在业务中的落地;\n5、坦诚清晰、积极乐观,责任心强、有主人翁意识,工作认真细致严谨,热爱技术,有较强的学习能力,有强烈的求知欲、好奇心和进取心,能及时关注和学习业界最新技术,对解决挑战性问题充满激情。\n\n加分项:\n1、对大模型技术及其应用有浓厚兴趣,有Agent及大模型评测体系建设经验、熟悉大模型训练、或熟悉LLM-as-a-Judge相关经验者优先;\n2、有Agent在复杂业务场景的落地经验或多Agent系统设计经验的优先;\n3、积极参与开源社区,有相关贡献者优先。\n1、通用评测体系建设:包括评测标准,评测集,评估能力,评测结果分析与归因等系列能力建设,跟踪前沿评测技术与Benchmark趋势,开展技术调研与创新实践,推动评测体系升级;\n2、评测分析:基于评测结果进行分析与诊断,挖掘模型或Agent在推理、规划、工具调用、代码执行等环节的问题,并输出改进建议。\n1、本科及以上学历,计算机科学、人工智能、软件工程等相关专业;\n2、对主流大模型的原理、能力边界及典型应用场景有较深入理解,熟悉大模型与Agent的常见评测方法;\n3、具备良好的工程基础,能够参与或主导评测框架、工具或平台的设计与实现;\n4、具备良好的业务理解能力、沟通与协作能力,能够与算法、产品、运营、研发团队高效协作,有技术判断力,逻辑思维清晰,学习能力强,能够推动评测体系在业务中的落地;\n5、坦诚清晰、积极乐观,责任心强、有主人翁意识,工作认真细致严谨,热爱技术,有较强的学习能力,有强烈的求知欲、好奇心和进取心,能及时关注和学习业界最新技术,对解决挑战性问题充满激情。\n\n加分项:\n1、对大模型技术及其应用有浓厚兴趣,有Agent及大模型评测体系建设经验、熟悉大模型训练、或熟悉LLM-as-a-Judge相关经验者优先;\n2、有Agent在复杂业务场景的落地经验或多Agent系统设计经验的优先;\n3、积极参与开源社区,有相关贡献者优先。",
"standard_classification": {
"std_category_code": "T015",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}