主分类:数据工程与数据平台研发
来源 JD 数据(旧分类保留,当前主分类见上方)
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "大数据计算引擎架构师-Data",
"job_level": "未披露",AI生成
"work_category": "全职",AI生成
"department": "未披露",
"location": "北京",
"work_mode": "未披露",AI生成
"job_category": "大数据"AI生成
},
"company": {
"company_name": "字节跳动",
"company_industry": "互联网 / 数字内容 / 电商",
"company_size": "10000人以上",
"company_website": "bytedance.com",
"company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": "",
"degree": "未披露",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。",
"requirements_text": "1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。",
"skills": [AI生成
"Java",
"Scala",
"SQL",
"Spark",
"数据治理",
"性能优化"
],
"preferred_qualifications": "2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先",
"job_highlights": "未披露"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://jobs.bytedance.com/experienced/position/7468234373033396488/detail"
}
]
},
"posting": {
"posting_id": "7468234373033396488",
"post_date": "2025-02-06",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://jobs.bytedance.com/experienced/position/7468234373033396488/detail"
},
"fulltext": "大数据计算引擎架构师-Data\n职位描述\n1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。\n\n职位要求\n1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。\n1、打造大数据计算引擎服务,支撑字节跳动相关产品线(如抖音、今日头条);\n2、负责对接Spark SQL、Presto、Hudi和Flink等计算引擎和组件,完善SQL语义和SQL优化器能力,提供功能强大、简单易用的OLAP计算服务;\n3、针对字节跳动复杂的多机房架构,设计并实现简单易用的离线数仓计算引擎架构,为数仓用户屏蔽复杂的底层计算资源、存储资源、网络资源管控;\n4、参与需求对接、技术调研和方案设计,理解并抽象业务需求,形成高效的技术方案并推动落地。\n1、熟悉Spark、Presto、Druid、Kylin、Hive等主流大数据系统原理及源码(不要求熟悉所有技术栈);\n2、熟悉主流OLAP引擎的优化原理,包括Filter下推和物化视图等,SQL优化器开发者优先;\n3、熟悉离线数仓业务架构,具备丰富的数仓重构、数据治理、数仓优化经验;\n4、具备离线数仓多机房架构建设经验,例如跨地区构建大数据计算引擎服务;\n5、精通Java/Scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络;\n6、具备大规模系统的故障诊断与性能优化能力,具备快速定位线上问题和快速Debug的能力,具有较强的项目推动能力,能推动技术项目在业务侧的落地。",
"standard_classification": {
"std_category_code": "T016",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}