主分类:数据工程与数据平台研发
来源 JD 数据(旧分类保留,当前主分类见上方)
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "大数据研发工程师(实时方向/数据解决) - 国际化广告数据平台",
"job_level": "未披露",AI生成
"work_category": "全职",AI生成
"department": "未披露",
"location": "上海",
"work_mode": "未披露",AI生成
"job_category": "大数据"AI生成
},
"company": {
"company_name": "字节跳动",
"company_industry": "互联网 / 数字内容 / 电商",
"company_size": "10000人以上",
"company_website": "bytedance.com",
"company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": 3,
"degree": "本科及以上学历",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "团队介绍:国际化广告数据平台团队致力于构建海量数据基础设施和高效数据计算服务体系,深入挖掘广告数据价值,为国际产品下全球广告业务的快速发展提供强有力的支持,实现三大核心使命:优化广告主体验、驱动业务增长、赋能战略落地。\n\n1、负责公司流量数据仓库的架构设计与建设,覆盖实时数仓与离线数仓全链路,支撑亿级/十亿级日活流量的数据采集、清洗、建模、计算与服务;\n2、主导流量数据链路的稳定性治理,保障指标SLA,应对大促、突发流量等极端场景下的数据高可用与低延迟挑战;\n3、深入开展数仓性能调优,针对实时计算(Flink等)和离线计算(Spark/Hive等)进行资源、代码、数据倾斜、存储等多维度优化,持续提升吞吐、降低延迟与成本;\n4、建设流量数仓规范与数据质量体系,推动指标口径统一、分层模型治理、血缘与元数据管理,提升数据可复用性与可信度;\n5、跟踪大数据前沿技术,结合业务场景引入新技术、新架构,驱动数仓平台的持续演进。",
"requirements_text": "1、本科及以上学历,计算机、软件工程、数学等相关专业,3年以上大数据/数仓相关工作经验;\n2、具备大流量场景下的数仓建设经验,曾处理过日均百亿级以上数据量或高并发实时数据流,对数据规模增长带来的挑战有实战认知;\n3、在实时数仓或离线数仓任一方向具备丰富的性能调优经验:\n1)实时方向:精通Flink/Spark Streaming等计算引擎,熟悉状态管理、背压、Checkpoint、窗口计算等调优手段;\n2)离线方向:精通Spark/Hive等引擎,熟悉执行计划分析、数据倾斜治理、资源调度、存储格式(Parquet/ORC)等优化方法;\n4、熟悉数仓建模理论(维度建模、分层设计),有复杂业务域的数据模型设计经验;\n5、熟悉Hadoop生态(HDFS、YARN、Kafka、HBase、ClickHouse/Doris等)中至少两项的原理与使用;\n6、熟练使用SQL及至少一门编程语言(Java/Scala/Python),具备良好的工程编码习惯,对数据稳定性有高度敬畏心,具备线上故障排查与应急响应经验。\n\n加分项\n1、有从0到1搭建流量数仓或实时数仓平台的经验;\n2、有AI结合数仓在需求开发交付,稳定性治理,性能优化等方向的实际落地经验;\n3、有大数据平台治理、成本优化、资源调度体系建设经验;\n4、有开源社区贡献或技术博客/分享经历。",
"skills": [AI生成
"Python",
"Java",
"Scala",
"SQL",
"ClickHouse",
"Spark",
"Hadoop",
"Flink",
"Kafka",
"性能优化",
"性能调优",
"建模"
],
"preferred_qualifications": "加分项",
"job_highlights": "未披露"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://jobs.bytedance.com/experienced/position/7483406246298896648/detail"
}
]
},
"posting": {
"posting_id": "7483406246298896648",
"post_date": "2025-03-19",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://jobs.bytedance.com/experienced/position/7483406246298896648/detail"
},
"fulltext": "大数据研发工程师(实时方向/数据解决) - 国际化广告数据平台\n职位描述\n团队介绍:国际化广告数据平台团队致力于构建海量数据基础设施和高效数据计算服务体系,深入挖掘广告数据价值,为国际产品下全球广告业务的快速发展提供强有力的支持,实现三大核心使命:优化广告主体验、驱动业务增长、赋能战略落地。\n\n1、负责公司流量数据仓库的架构设计与建设,覆盖实时数仓与离线数仓全链路,支撑亿级/十亿级日活流量的数据采集、清洗、建模、计算与服务;\n2、主导流量数据链路的稳定性治理,保障指标SLA,应对大促、突发流量等极端场景下的数据高可用与低延迟挑战;\n3、深入开展数仓性能调优,针对实时计算(Flink等)和离线计算(Spark/Hive等)进行资源、代码、数据倾斜、存储等多维度优化,持续提升吞吐、降低延迟与成本;\n4、建设流量数仓规范与数据质量体系,推动指标口径统一、分层模型治理、血缘与元数据管理,提升数据可复用性与可信度;\n5、跟踪大数据前沿技术,结合业务场景引入新技术、新架构,驱动数仓平台的持续演进。\n\n职位要求\n1、本科及以上学历,计算机、软件工程、数学等相关专业,3年以上大数据/数仓相关工作经验;\n2、具备大流量场景下的数仓建设经验,曾处理过日均百亿级以上数据量或高并发实时数据流,对数据规模增长带来的挑战有实战认知;\n3、在实时数仓或离线数仓任一方向具备丰富的性能调优经验:\n1)实时方向:精通Flink/Spark Streaming等计算引擎,熟悉状态管理、背压、Checkpoint、窗口计算等调优手段;\n2)离线方向:精通Spark/Hive等引擎,熟悉执行计划分析、数据倾斜治理、资源调度、存储格式(Parquet/ORC)等优化方法;\n4、熟悉数仓建模理论(维度建模、分层设计),有复杂业务域的数据模型设计经验;\n5、熟悉Hadoop生态(HDFS、YARN、Kafka、HBase、ClickHouse/Doris等)中至少两项的原理与使用;\n6、熟练使用SQL及至少一门编程语言(Java/Scala/Python),具备良好的工程编码习惯,对数据稳定性有高度敬畏心,具备线上故障排查与应急响应经验。\n\n加分项\n1、有从0到1搭建流量数仓或实时数仓平台的经验;\n2、有AI结合数仓在需求开发交付,稳定性治理,性能优化等方向的实际落地经验;\n3、有大数据平台治理、成本优化、资源调度体系建设经验;\n4、有开源社区贡献或技术博客/分享经历。\n团队介绍:国际化广告数据平台团队致力于构建海量数据基础设施和高效数据计算服务体系,深入挖掘广告数据价值,为国际产品下全球广告业务的快速发展提供强有力的支持,实现三大核心使命:优化广告主体验、驱动业务增长、赋能战略落地。\n\n1、负责公司流量数据仓库的架构设计与建设,覆盖实时数仓与离线数仓全链路,支撑亿级/十亿级日活流量的数据采集、清洗、建模、计算与服务;\n2、主导流量数据链路的稳定性治理,保障指标SLA,应对大促、突发流量等极端场景下的数据高可用与低延迟挑战;\n3、深入开展数仓性能调优,针对实时计算(Flink等)和离线计算(Spark/Hive等)进行资源、代码、数据倾斜、存储等多维度优化,持续提升吞吐、降低延迟与成本;\n4、建设流量数仓规范与数据质量体系,推动指标口径统一、分层模型治理、血缘与元数据管理,提升数据可复用性与可信度;\n5、跟踪大数据前沿技术,结合业务场景引入新技术、新架构,驱动数仓平台的持续演进。\n1、本科及以上学历,计算机、软件工程、数学等相关专业,3年以上大数据/数仓相关工作经验;\n2、具备大流量场景下的数仓建设经验,曾处理过日均百亿级以上数据量或高并发实时数据流,对数据规模增长带来的挑战有实战认知;\n3、在实时数仓或离线数仓任一方向具备丰富的性能调优经验:\n1)实时方向:精通Flink/Spark Streaming等计算引擎,熟悉状态管理、背压、Checkpoint、窗口计算等调优手段;\n2)离线方向:精通Spark/Hive等引擎,熟悉执行计划分析、数据倾斜治理、资源调度、存储格式(Parquet/ORC)等优化方法;\n4、熟悉数仓建模理论(维度建模、分层设计),有复杂业务域的数据模型设计经验;\n5、熟悉Hadoop生态(HDFS、YARN、Kafka、HBase、ClickHouse/Doris等)中至少两项的原理与使用;\n6、熟练使用SQL及至少一门编程语言(Java/Scala/Python),具备良好的工程编码习惯,对数据稳定性有高度敬畏心,具备线上故障排查与应急响应经验。\n\n加分项\n1、有从0到1搭建流量数仓或实时数仓平台的经验;\n2、有AI结合数仓在需求开发交付,稳定性治理,性能优化等方向的实际落地经验;\n3、有大数据平台治理、成本优化、资源调度体系建设经验;\n4、有开源社区贡献或技术博客/分享经历。",
"standard_classification": {
"std_category_code": "T016",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}