职位详情

职位列表 链接有效 不适用(官网全量采集) official:meituan:4150274305

数据架构-数据湖与数据集成后端开发

未披露 · 北京市 · 美团

主分类:数据工程与数据平台研发
算法与数据
来源 JD 数据(旧分类保留,当前主分类见上方)
{
    "schema_version": "via_ai_product_manager_jobs_v1",
    "data_type": "ai_product_manager_jobs",
    "job": {
        "job_title": "数据架构-数据湖与数据集成后端开发",
        "job_level": "未披露",AI生成
        "work_category": "全职",AI生成
        "department": "核心本地商业-基础研发平台",
        "location": "北京市",
        "work_mode": "未披露",AI生成
        "job_category": "技术类"AI生成
    },
    "company": {
        "company_name": "美团",
        "company_industry": "科技零售 / 生活服务",
        "company_size": "10000人以上",
        "company_website": "meituan.com",
        "company_description": "美团通过科技推动服务零售和商品零售的数字化,连接消费者与商户。"
    },
    "compensation": {
        "salary_range": {
            "min": "",
            "max": "",
            "currency": "未披露",
            "cycle": "未披露"
        },
        "benefits": "未披露"
    },
    "requirements": {
        "working_years": "",
        "degree": "计算机相关专业本科及以上学历",
        "language": "未披露",AI生成
        "visa_support": "未披露",
        "responsibilities": "1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。",
        "requirements_text": "1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。",
        "skills": [AI生成
            "Java",
            "C++",
            "Spark",
            "Flink",
            "分布式系统",
            "沟通能力"
        ],
        "preferred_qualifications": "未披露",
        "job_highlights": "1. 负责美团数据同步解决方案的建设,推进流批一体在数据同步领域的持续优化。 \n2. 参与美团数据湖引擎从0到1的落地。 \n3. 能够接触到丰富的业务场景,包括但不限于数据开发、机器学习等,助力业务数据集成与数据湖解决方案的落地。 \n4. 提供良好的职业发展空间,参与解决复杂的技术问题,不断学习和成长。"
    },
    "contact": {
        "recruiter_name": "未披露",
        "contact_methods": [
            {
                "type": "apply_link",
                "value": "https://zhaopin.meituan.com/web/position/detail?jobUnionId=4150274305&jobShareType=1"
            }
        ]
    },
    "posting": {
        "posting_id": "4150274305",
        "post_date": "",
        "hire_time": "未披露",
        "update_date": "20260917",
        "job_url": "https://zhaopin.meituan.com/web/position/detail?jobUnionId=4150274305&jobShareType=1"
    },
    "fulltext": "数据架构-数据湖与数据集成后端开发\n数据架构-数据湖与数据集成后端开发\n\n基础信息\n工作地点:北京市\n部门:核心本地商业-基础研发平台\n职位类别:技术类\n职位族群:软件\n更新时间:2026-02-06\n\n岗位职责\n1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。\n\n岗位基本要求\n1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。\n\n岗位亮点\n1. 负责美团数据同步解决方案的建设,推进流批一体在数据同步领域的持续优化。 \n2. 参与美团数据湖引擎从0到1的落地。 \n3. 能够接触到丰富的业务场景,包括但不限于数据开发、机器学习等,助力业务数据集成与数据湖解决方案的落地。 \n4. 提供良好的职业发展空间,参与解决复杂的技术问题,不断学习和成长。\n1. 构建实时/离线数据采集与同步解决方案,支持跨数据库、数据仓库、数据湖的数据交互。优化数据传输性能,解决高并发、大数据量场景下的延迟与容错问题。设计数据一致性保障机制,处理数据冲突、断点续传、幂等性等核心问题,确保端到端数据质量。 \n2. 持续迭代数据集成解决方案的架构设计,支持容灾、出海等业务场景;优化架构设计,持续降低成本。\n3. 研究前沿技术(如CDC、流批一体架构),推动数据同步技术在业务场景中的创新应用。 \n4. 构建高性能、高可用性数据湖引擎,参与美团数据湖引擎从0到1的落地与业务推广工作,持续提升系统性能和稳定性,降低成本。 \n5. 驱动数据湖的周边生态建设,包括实时/离线计算引擎,查询引擎,产品开发平台等生态,助力业务基于数据湖的解决方案落地。 \n6. 探索AI驱动的智能数据映射能力,基于大模型理解源表schema自动生成目标表映射规则,将数据集成配置从人工逐字段编排简化为AI辅助一键生成。\n1. 计算机相关专业本科及以上学历,2年以上数据集成与同步/大数据计算、存储引擎开发或数据湖相关工作经验。 \n2. 熟悉Java/C++编程语言,能够独立进行系统和工具开发。 \n3. 熟悉主流的大数据数据集成引擎和数据湖引擎,如Canal、DataX、Spark、Flink、Paimon等。 \n4. 熟悉分布式系统和大规模数据处理的设计和实现,具备高并发、高性能系统开发经验。 \n5. 具备良好沟通能力和问题解决能力,能够高效与系统上下游、业务方沟通协作。",
    "standard_classification": {
        "std_category_code": "T016",
        "std_aux_codes": [],
        "std_category_status": null,
        "std_taxonomy_version": "20261104"
    }
}