主分类:AI模型评测工程
来源 JD 数据(旧分类保留,当前主分类见上方)
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "智能系统评估研究科学家-Commercial AI",
"job_level": "未披露",AI生成
"work_category": "全职",AI生成
"department": "未披露",
"location": "上海",
"work_mode": "未披露",AI生成
"job_category": "算法"AI生成
},
"company": {
"company_name": "字节跳动",
"company_industry": "互联网 / 数字内容 / 电商",
"company_size": "10000人以上",
"company_website": "bytedance.com",
"company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": "",
"degree": "未披露",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "1、我们正在构建面向大模型与Agent的智能系统评估体系,关注如何更可靠地定义、测量、解释和比较智能系统能力;\n2、研究科学家的核心职责是回答什么值得被测量、应该如何解释,以及结论成立的边界在哪里;你将参与定义核心能力、评估对象边界和评估结论的解释框架,将抽象能力与决策质量转化为可测量的评估目标、证据链和评分原则,并基于测量理论设计评估任务、评分规则和结果解释方式;你也会参与建立能力、任务、情境、风险等结构化描述,与算法、工程、产品和业务团队协作,将评估方法落地为可执行、可扩展的评估体系;\n3、在日常工作中,你会阅读真实负面案例、分析评分分歧,并把具体问题抽象成更稳定的能力定义;你也会和研究员、工程师一起讨论某个能力该不该测、怎么测、什么证据足够支持结论,并在不完美数据、不一致判断和模糊业务目标下建立更经得起推敲的评估规则。",
"requirements_text": "1、心理学、教育测量、统计、数学、物理、语言学、认知科学等定量/理论学科相关专业;\n2、系统掌握测量理论与方法,在效度、信度、一致性、偏差控制、评分设计等方向受过专业训练;\n3、具备扎实的形式化建模、统计推断与评估设计能力,可将抽象能力转化为可检验评估框架;\n4、能将理论问题转化为结构化评估方案与工程可落地规则,熟悉实验设计与不确定性分析;\n5、专注于智能系统、对话Agent、复杂决策系统的评估研究,有AI评估、自动评分经验者优先;\n6、具备优秀书面表达与跨学科协作能力,熟悉IRT、贝叶斯、因果推断及大模型相关经验优先。",
"skills": [AI生成
"建模",
"大语言模型"
],
"preferred_qualifications": "5、专注于智能系统、对话Agent、复杂决策系统的评估研究,有AI评估、自动评分经验者优先;6、具备优秀书面表达与跨学科协作能力,熟悉IRT、贝叶斯、因果推断及大模型相关经验优先",
"job_highlights": "未披露"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://jobs.bytedance.com/experienced/position/7626392285946661125/detail"
}
]
},
"posting": {
"posting_id": "7626392285946661125",
"post_date": "2026-04-08",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://jobs.bytedance.com/experienced/position/7626392285946661125/detail"
},
"fulltext": "智能系统评估研究科学家-Commercial AI\n职位描述\n1、我们正在构建面向大模型与Agent的智能系统评估体系,关注如何更可靠地定义、测量、解释和比较智能系统能力;\n2、研究科学家的核心职责是回答什么值得被测量、应该如何解释,以及结论成立的边界在哪里;你将参与定义核心能力、评估对象边界和评估结论的解释框架,将抽象能力与决策质量转化为可测量的评估目标、证据链和评分原则,并基于测量理论设计评估任务、评分规则和结果解释方式;你也会参与建立能力、任务、情境、风险等结构化描述,与算法、工程、产品和业务团队协作,将评估方法落地为可执行、可扩展的评估体系;\n3、在日常工作中,你会阅读真实负面案例、分析评分分歧,并把具体问题抽象成更稳定的能力定义;你也会和研究员、工程师一起讨论某个能力该不该测、怎么测、什么证据足够支持结论,并在不完美数据、不一致判断和模糊业务目标下建立更经得起推敲的评估规则。\n\n职位要求\n1、心理学、教育测量、统计、数学、物理、语言学、认知科学等定量/理论学科相关专业;\n2、系统掌握测量理论与方法,在效度、信度、一致性、偏差控制、评分设计等方向受过专业训练;\n3、具备扎实的形式化建模、统计推断与评估设计能力,可将抽象能力转化为可检验评估框架;\n4、能将理论问题转化为结构化评估方案与工程可落地规则,熟悉实验设计与不确定性分析;\n5、专注于智能系统、对话Agent、复杂决策系统的评估研究,有AI评估、自动评分经验者优先;\n6、具备优秀书面表达与跨学科协作能力,熟悉IRT、贝叶斯、因果推断及大模型相关经验优先。\n1、我们正在构建面向大模型与Agent的智能系统评估体系,关注如何更可靠地定义、测量、解释和比较智能系统能力;\n2、研究科学家的核心职责是回答什么值得被测量、应该如何解释,以及结论成立的边界在哪里;你将参与定义核心能力、评估对象边界和评估结论的解释框架,将抽象能力与决策质量转化为可测量的评估目标、证据链和评分原则,并基于测量理论设计评估任务、评分规则和结果解释方式;你也会参与建立能力、任务、情境、风险等结构化描述,与算法、工程、产品和业务团队协作,将评估方法落地为可执行、可扩展的评估体系;\n3、在日常工作中,你会阅读真实负面案例、分析评分分歧,并把具体问题抽象成更稳定的能力定义;你也会和研究员、工程师一起讨论某个能力该不该测、怎么测、什么证据足够支持结论,并在不完美数据、不一致判断和模糊业务目标下建立更经得起推敲的评估规则。\n1、心理学、教育测量、统计、数学、物理、语言学、认知科学等定量/理论学科相关专业;\n2、系统掌握测量理论与方法,在效度、信度、一致性、偏差控制、评分设计等方向受过专业训练;\n3、具备扎实的形式化建模、统计推断与评估设计能力,可将抽象能力转化为可检验评估框架;\n4、能将理论问题转化为结构化评估方案与工程可落地规则,熟悉实验设计与不确定性分析;\n5、专注于智能系统、对话Agent、复杂决策系统的评估研究,有AI评估、自动评分经验者优先;\n6、具备优秀书面表达与跨学科协作能力,熟悉IRT、贝叶斯、因果推断及大模型相关经验优先。",
"standard_classification": {
"std_category_code": "T015",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}