职位详情

职位列表 链接有效 不适用(官网全量采集) official:bytedance:7468234373033396488

大数据计算引擎架构师-Data

未披露 · 北京 · 字节跳动

主分类:数据工程与数据平台研发
算法与数据
来源 JD 数据(旧分类保留,当前主分类见上方)
{
    "schema_version": "via_ai_product_manager_jobs_v1",
    "data_type": "ai_product_manager_jobs",
    "job": {
        "job_title": "大数据计算引擎架构师-Data",
        "job_level": "未披露",AI生成
        "work_category": "全职",AI生成
        "department": "未披露",
        "location": "北京",
        "work_mode": "未披露",AI生成
        "job_category": "大数据"AI生成
    },
    "company": {
        "company_name": "字节跳动",
        "company_industry": "互联网 / 数字内容 / 电商",
        "company_size": "10000人以上",
        "company_website": "bytedance.com",
        "company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
    },
    "compensation": {
        "salary_range": {
            "min": "",
            "max": "",
            "currency": "未披露",
            "cycle": "未披露"
        },
        "benefits": "未披露"
    },
    "requirements": {
        "working_years": "",
        "degree": "未披露",
        "language": "未披露",AI生成
        "visa_support": "未披露",
        "responsibilities": "1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。",
        "requirements_text": "1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。",
        "skills": [AI生成
            "Java",
            "Scala",
            "SQL",
            "Spark",
            "数据治理",
            "性能优化"
        ],
        "preferred_qualifications": "2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先",
        "job_highlights": "未披露"
    },
    "contact": {
        "recruiter_name": "未披露",
        "contact_methods": [
            {
                "type": "apply_link",
                "value": "https://jobs.bytedance.com/experienced/position/7468234373033396488/detail"
            }
        ]
    },
    "posting": {
        "posting_id": "7468234373033396488",
        "post_date": "2025-02-06",
        "hire_time": "未披露",
        "update_date": "20260917",
        "job_url": "https://jobs.bytedance.com/experienced/position/7468234373033396488/detail"
    },
    "fulltext": "大数据计算引擎架构师-Data\n职位描述\n1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。\n\n职位要求\n1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。\n1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。\n1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。",
    "standard_classification": {
        "std_category_code": "T016",
        "std_aux_codes": [],
        "std_category_status": null,
        "std_taxonomy_version": "20261104"
    }
}