职位详情

职位列表 链接有效 不适用(官网全量采集) official:bytedance:6704579125379598600

训练推理一体化存储研发高级工程师-Data

未披露 · 上海 · 字节跳动

JD数据
{
    "schema_version": "via_ai_product_manager_jobs_v1",
    "data_type": "ai_product_manager_jobs",
    "job": {
        "job_title": "训练推理一体化存储研发高级工程师-Data",
        "job_level": "高级",AI生成
        "work_category": "全职",AI生成
        "department": "未披露",
        "location": "上海",
        "work_mode": "未披露",AI生成
        "job_category": "后端"AI生成
    },
    "company": {
        "company_name": "字节跳动",
        "company_industry": "互联网 / 数字内容 / 电商",
        "company_size": "10000人以上",
        "company_website": "bytedance.com",
        "company_description": "字节跳动提供内容创作、信息分发、电商和协作产品,旗下产品包括抖音、今日头条、TikTok和飞书。"
    },
    "compensation": {
        "salary_range": {
            "min": "",
            "max": "",
            "currency": "未披露",
            "cycle": "未披露"
        },
        "benefits": "未披露"
    },
    "requirements": {
        "working_years": 3,
        "degree": "未披露",
        "language": "未披露",AI生成
        "visa_support": "未披露",
        "responsibilities": "团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这里你有机会参与大规模机器学习在线预估框架的研发与优化,也有机会参与模型训练与调度等相关问题的研究与突破,解决系统瓶颈,降低成本开销;如你对大数据感兴趣,在这里也有机会参与通用实时计算系统的开发、构建统一的推荐特征中台,为推荐业务实现先进的消重、计数、特征服务等;我们期待热爱技术的你加入,一起创造更多可能。\n\n1、负责设计和实现面向推荐/广告大模型推理和训练的多层级存储系统,综合利用显存、本地内存、分布式内存/磁盘、远端大容量存储系统(HDFS)等多种介质进行数据的存储和迁移管理,实现近计算缓存+远端大容量存储的一体化分级系统;\n2、负责优化推荐大模型KV Cache命中率,从推理框架、流量调度、多级缓存等多个系统维度入手定制化优化策略,和业务方协作完成端到端推理性能加速;\n3、负责建设搜广推通用用户行为数据存储,设计和实现离在线EB级别行为数据的统一存储、IO、近端Cache解决方案,支撑EB级别训练和推理数据,提供高可用保障,在离在线混合负载下,高吞吐和低延时能力的分布式存储系统。",
        "requirements_text": "1、3年以上相关领域开发经验,扎实的编程能力,精通C/C++/Java中的一种;\n2、对分布式系统的架构和原理有比较深入的了解;\n3、优秀的发现和解决问题能力,良好的沟通能力,具备团队合作精神。\n\n加分项:\n1、拥抱开源,有开源项目经历,对前沿技术有浓厚的热情和探索欲望;\n2、熟悉Paxos/Raft等分布式一致性算法;\n3、熟悉分布式事务模型;\n4、熟悉常见存储引擎Rocksdb、Redis底层代码;\n5、熟悉操作系统底层知识,有TCP/IP、IO等系统调优经验。",
        "skills": [AI生成
            "Java",
            "C++",
            "Redis",
            "分布式系统",
            "团队协作",
            "沟通能力",
            "解决问题"
        ],
        "preferred_qualifications": "加分项:",
        "job_highlights": "未披露"
    },
    "contact": {
        "recruiter_name": "未披露",
        "contact_methods": [
            {
                "type": "apply_link",
                "value": "https://jobs.bytedance.com/experienced/position/6704579125379598600/detail"
            }
        ]
    },
    "posting": {
        "posting_id": "6704579125379598600",
        "post_date": "2019-03-05",
        "hire_time": "未披露",
        "update_date": "20260917",
        "job_url": "https://jobs.bytedance.com/experienced/position/6704579125379598600/detail"
    },
    "fulltext": "训练推理一体化存储研发高级工程师-Data\n职位描述\n团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这里你有机会参与大规模机器学习在线预估框架的研发与优化,也有机会参与模型训练与调度等相关问题的研究与突破,解决系统瓶颈,降低成本开销;如你对大数据感兴趣,在这里也有机会参与通用实时计算系统的开发、构建统一的推荐特征中台,为推荐业务实现先进的消重、计数、特征服务等;我们期待热爱技术的你加入,一起创造更多可能。\n\n1、负责设计和实现面向推荐/广告大模型推理和训练的多层级存储系统,综合利用显存、本地内存、分布式内存/磁盘、远端大容量存储系统(HDFS)等多种介质进行数据的存储和迁移管理,实现近计算缓存+远端大容量存储的一体化分级系统;\n2、负责优化推荐大模型KV Cache命中率,从推理框架、流量调度、多级缓存等多个系统维度入手定制化优化策略,和业务方协作完成端到端推理性能加速;\n3、负责建设搜广推通用用户行为数据存储,设计和实现离在线EB级别行为数据的统一存储、IO、近端Cache解决方案,支撑EB级别训练和推理数据,提供高可用保障,在离在线混合负载下,高吞吐和低延时能力的分布式存储系统。\n\n职位要求\n1、3年以上相关领域开发经验,扎实的编程能力,精通C/C++/Java中的一种;\n2、对分布式系统的架构和原理有比较深入的了解;\n3、优秀的发现和解决问题能力,良好的沟通能力,具备团队合作精神。\n\n加分项:\n1、拥抱开源,有开源项目经历,对前沿技术有浓厚的热情和探索欲望;\n2、熟悉Paxos/Raft等分布式一致性算法;\n3、熟悉分布式事务模型;\n4、熟悉常见存储引擎Rocksdb、Redis底层代码;\n5、熟悉操作系统底层知识,有TCP/IP、IO等系统调优经验。\n团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这里你有机会参与大规模机器学习在线预估框架的研发与优化,也有机会参与模型训练与调度等相关问题的研究与突破,解决系统瓶颈,降低成本开销;如你对大数据感兴趣,在这里也有机会参与通用实时计算系统的开发、构建统一的推荐特征中台,为推荐业务实现先进的消重、计数、特征服务等;我们期待热爱技术的你加入,一起创造更多可能。\n\n1、负责设计和实现面向推荐/广告大模型推理和训练的多层级存储系统,综合利用显存、本地内存、分布式内存/磁盘、远端大容量存储系统(HDFS)等多种介质进行数据的存储和迁移管理,实现近计算缓存+远端大容量存储的一体化分级系统;\n2、负责优化推荐大模型KV Cache命中率,从推理框架、流量调度、多级缓存等多个系统维度入手定制化优化策略,和业务方协作完成端到端推理性能加速;\n3、负责建设搜广推通用用户行为数据存储,设计和实现离在线EB级别行为数据的统一存储、IO、近端Cache解决方案,支撑EB级别训练和推理数据,提供高可用保障,在离在线混合负载下,高吞吐和低延时能力的分布式存储系统。\n1、3年以上相关领域开发经验,扎实的编程能力,精通C/C++/Java中的一种;\n2、对分布式系统的架构和原理有比较深入的了解;\n3、优秀的发现和解决问题能力,良好的沟通能力,具备团队合作精神。\n\n加分项:\n1、拥抱开源,有开源项目经历,对前沿技术有浓厚的热情和探索欲望;\n2、熟悉Paxos/Raft等分布式一致性算法;\n3、熟悉分布式事务模型;\n4、熟悉常见存储引擎Rocksdb、Redis底层代码;\n5、熟悉操作系统底层知识,有TCP/IP、IO等系统调优经验。"
}