主分类:数据工程与数据平台研发
来源 JD 数据(旧分类保留,当前主分类见上方)
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "数据架构-数据湖与数据集成后端开发",
"job_level": "未披露",AI生成
"work_category": "全职",AI生成
"department": "核心本地商业-基础研发平台",
"location": "北京市",
"work_mode": "未披露",AI生成
"job_category": "技术类"AI生成
},
"company": {
"company_name": "美团",
"company_industry": "科技零售 / 生活服务",
"company_size": "10000人以上",
"company_website": "meituan.com",
"company_description": "美团通过科技推动服务零售和商品零售的数字化,连接消费者与商户。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": "",
"degree": "计算机相关专业本科及以上学历",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。",
"requirements_text": "1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。",
"skills": [AI生成
"Java",
"C++",
"Spark",
"Flink",
"分布式系统",
"沟通能力"
],
"preferred_qualifications": "未披露",
"job_highlights": "1. 负责美团数据同步解决方案的建设,推进流批一体在数据同步领域的持续优化。 \n2. 参与美团数据湖引擎从0到1的落地。 \n3. 能够接触到丰富的业务场景,包括但不限于数据开发、机器学习等,助力业务数据集成与数据湖解决方案的落地。 \n4. 提供良好的职业发展空间,参与解决复杂的技术问题,不断学习和成长。"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://zhaopin.meituan.com/web/position/detail?jobUnionId=4150274305&jobShareType=1"
}
]
},
"posting": {
"posting_id": "4150274305",
"post_date": "",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://zhaopin.meituan.com/web/position/detail?jobUnionId=4150274305&jobShareType=1"
},
"fulltext": "数据架构-数据湖与数据集成后端开发\n数据架构-数据湖与数据集成后端开发\n\n基础信息\n工作地点:北京市\n部门:核心本地商业-基础研发平台\n职位类别:技术类\n职位族群:软件\n更新时间:2026-02-06\n\n岗位职责\n1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。\n\n岗位基本要求\n1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。\n\n岗位亮点\n1. 负责美团数据同步解决方案的建设,推进流批一体在数据同步领域的持续优化。 \n2. 参与美团数据湖引擎从0到1的落地。 \n3. 能够接触到丰富的业务场景,包括但不限于数据开发、机器学习等,助力业务数据集成与数据湖解决方案的落地。 \n4. 提供良好的职业发展空间,参与解决复杂的技术问题,不断学习和成长。\n1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。\n1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。",
"standard_classification": {
"std_category_code": "T016",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}