{
    "schema_version": "via_ai_product_manager_jobs_v1",
    "data_type": "ai_product_manager_jobs",
    "job": {
        "job_title": "LLM标注评测助理-外包可转正编",
        "job_level": "中级",AI生成
        "work_category": "全职",AI生成
        "department": "",
        "location": "北京·朝阳区·望京",
        "work_mode": "现场办公",AI生成
        "job_category": "职责混合/无法判定"AI生成
    },
    "company": {
        "company_name": "捷科智诚",
        "company_industry": "计算机软件",
        "company_size": "10000人以上",
        "company_website": "",
        "company_description": ""
    },
    "compensation": {
        "salary_range": {
            "min": 13000,
            "max": 20000,
            "currency": "CNY",
            "cycle": "month"
        },
        "benefits": ""
    },
    "requirements": {
        "working_years": 1,
        "degree": "硕士",
        "language": "中英双语",AI生成
        "visa_support": "",
        "responsibilities": "",
        "requirements_text": "线上一轮面试\n上班时间9.30-18.30，正常中午休息12-13.30 ，弹性半小时，周末双休，如有加班一⽐⼀调休，办公区环境⾮常好 ， 食堂很Nice\n需求一 LLM评测助理\n⼀、学历及经验要求：\n● 学历：统招重点本科及以上学历，硕士优先；\n● 专业：计算机、语言学、心理学、社会学等人文社科或交叉学科背景者优先；\n● 经验：具备2年以上评测或大规模数据标注项目管理经验，熟悉LLM评测的常见难点（如幻觉、偏见、安全对齐、复杂推理等评估）；\n● 技能：熟悉常用的LLM自动评测工具或具有Python自动化处理数据能力者优先；\n二、岗位职责：\n1. 评测体系构建：针对大语言模型（LLM）的核心能力（如理解、推理、生成、多轮对话等），设计并定义多维度评测指标（如准确性、连贯性、逻辑性、安全性等），构建评测数据集、提示词库及评测基准（Benchmark）；\n2. 项目管理：带领内/外部标注团队，制定SOP、把控质量与进度，确保复杂评测项目的高效、准确交付；\n3. 结果分析：对评测数据进行深度分析，能独立产出模型评测分析报告，指出具体优劣，为模型调优与产品发布提供关键输入；\n4. 具备评测基准（Benchmark）构建经验者优先。\n三、岗位要求：\n● 学历：统招重点本科及以上学历，硕士优先；\n● 专业：计算机、语言学、心理学、社会学等人文社科或交叉学科背景者优先；\n● 经验：具备2年以上评测或大规模数据标注项目管理经验，熟悉LLM评测的常见难点（如幻觉、偏见、安全对齐、复杂推理等评估）；\n● 技能：熟悉常用的LLM自动评测工具或具有Python自动化处理数据能力者优先；\"\n需求二 AI数据评测运营 - LLM&Omni方向\n岗位职责：\n1. 负责大模型训练及评测所需的数据标注任务全流程管理，包括需求拆解、规范制定、任务分发、进度监控及质量验收。\n2. 搭建并迭代标注质量评估体系，通过一致性检验、Badcase复盘、难度分级抽检等手段，持续提升数据质量。\n3.管理标注团队，制定培训计划与绩效考核方案，并负责项目结算。\n5. 参与评测数据集构建及后续摸底报告产出等执行任务。\n6. 梳理运营SOP，推动自动化质检工具的需求设计与落地，提升运营效率与自动化水平。\n任职要求\n1、有友商AI数据运营&产品经验优先（标注、评测经验不限制）\n2、学历大学本科及以上，专业不限\n3、有大模型数据标注、评估项目管理及运营经验，大厂任职经历1年及以上优先\n4、具备优秀的沟通协调能力和团队协作意识，抗压能力强\n5、具备责任心和较强的团队意识，对大模型有较强的兴趣\n6、有沉淀文档的意识，做事认真负责",
        "skills": [AI生成
            "AI数据安全与合规治理",
            "API/SDK与开放平台开发",
            "Agent系统构建",
            "GTM与商业化策略",
            "Linux/DevOps/CI-CD"
        ],
        "preferred_qualifications": "",
        "job_highlights": ""
    },
    "contact": {
        "recruiter_name": "",
        "contact_methods": [
            {
                "type": "apply_link",
                "value": "https://www.zhipin.com/job_detail/7d5bdf87ea6a9cd50nZ63d69F1pW.html"
            }
        ]
    },
    "posting": {
        "posting_id": "7d5bdf87ea6a9cd50nZ63d69F1pW",
        "post_date": "",
        "hire_time": "",
        "update_date": "",
        "job_url": "https://www.zhipin.com/job_detail/7d5bdf87ea6a9cd50nZ63d69F1pW.html"
    },
    "fulltext": "线上一轮面试\n上班时间9.30-18.30，正常中午休息12-13.30 ，弹性半小时，周末双休，如有加班一⽐⼀调休，办公区环境⾮常好 ， 食堂很Nice\n需求一 LLM评测助理\n⼀、学历及经验要求：\n● 学历：统招重点本科及以上学历，硕士优先；\n● 专业：计算机、语言学、心理学、社会学等人文社科或交叉学科背景者优先；\n● 经验：具备2年以上评测或大规模数据标注项目管理经验，熟悉LLM评测的常见难点（如幻觉、偏见、安全对齐、复杂推理等评估）；\n● 技能：熟悉常用的LLM自动评测工具或具有Python自动化处理数据能力者优先；\n二、岗位职责：\n1. 评测体系构建：针对大语言模型（LLM）的核心能力（如理解、推理、生成、多轮对话等），设计并定义多维度评测指标（如准确性、连贯性、逻辑性、安全性等），构建评测数据集、提示词库及评测基准（Benchmark）；\n2. 项目管理：带领内/外部标注团队，制定SOP、把控质量与进度，确保复杂评测项目的高效、准确交付；\n3. 结果分析：对评测数据进行深度分析，能独立产出模型评测分析报告，指出具体优劣，为模型调优与产品发布提供关键输入；\n4. 具备评测基准（Benchmark）构建经验者优先。\n三、岗位要求：\n● 学历：统招重点本科及以上学历，硕士优先；\n● 专业：计算机、语言学、心理学、社会学等人文社科或交叉学科背景者优先；\n● 经验：具备2年以上评测或大规模数据标注项目管理经验，熟悉LLM评测的常见难点（如幻觉、偏见、安全对齐、复杂推理等评估）；\n● 技能：熟悉常用的LLM自动评测工具或具有Python自动化处理数据能力者优先；\"\n需求二 AI数据评测运营 - LLM&Omni方向\n岗位职责：\n1. 负责大模型训练及评测所需的数据标注任务全流程管理，包括需求拆解、规范制定、任务分发、进度监控及质量验收。\n2. 搭建并迭代标注质量评估体系，通过一致性检验、Badcase复盘、难度分级抽检等手段，持续提升数据质量。\n3.管理标注团队，制定培训计划与绩效考核方案，并负责项目结算。\n5. 参与评测数据集构建及后续摸底报告产出等执行任务。\n6. 梳理运营SOP，推动自动化质检工具的需求设计与落地，提升运营效率与自动化水平。\n任职要求\n1、有友商AI数据运营&产品经验优先（标注、评测经验不限制）\n2、学历大学本科及以上，专业不限\n3、有大模型数据标注、评估项目管理及运营经验，大厂任职经历1年及以上优先\n4、具备优秀的沟通协调能力和团队协作意识，抗压能力强\n5、具备责任心和较强的团队意识，对大模型有较强的兴趣\n6、有沉淀文档的意识，做事认真负责"
}