主分类：数据工程与数据平台研发
来源 JD 数据（旧分类保留，当前主分类见上方）
{
"schema_version": "via_ai_product_manager_jobs_v1",
"data_type": "ai_product_manager_jobs",
"job": {
"job_title": "数据采集开发工程师",
"job_level": "校招",AI生成
"work_category": "全职",AI生成
"department": "网易互联网2027届校园招聘",
"location": "杭州",
"work_mode": "未披露",AI生成
"job_category": "技术"AI生成
},
"company": {
"company_name": "网易",
"company_industry": "互联网 / 游戏 / 数字内容",
"company_size": "10000人以上",
"company_website": "netease.com",
"company_description": "网易提供互联网和游戏服务，并通过有道、网易云音乐、网易严选等业务提供学习、音乐及消费服务。"
},
"compensation": {
"salary_range": {
"min": "",
"max": "",
"currency": "未披露",
"cycle": "未披露"
},
"benefits": "未披露"
},
"requirements": {
"working_years": "",
"degree": "2027届本科及以上学历",
"language": "未披露",AI生成
"visa_support": "未披露",
"responsibilities": "1. 参与网络数据采集系统的设计、开发、维护与优化，完成互联网公开数据的采集、解析、清洗和结构化处理；\n2. 参与爬虫程序的持续运营与迭代，及时发现并解决页面结构变化、接口变化、数据异常等问题，保障数据采集的稳定性和准确性；\n3. 参与爬虫性能及采集策略优化，包括任务调度、请求效率、资源占用、代理策略、异常重试及反爬机制分析等；\n4. 参与 Web / App 数据采集相关技术研究，包括网络协议分析、动态页面解析、接口分析及自动化采集等；\n5. 对采集数据进行基础统计、分析及质量校验，与数据工程、数据分析及业务团队协作，持续提升数据采集系统的有效性和可靠性；\n6. 持续关注数据采集、网络协议、自动化、AI Coding 等相关技术发展，并探索新技术在实际业务场景中的应用。",
"requirements_text": "1. 2027届本科及以上学历，计算机、软件工程、网络工程、信息安全、人工智能等相关专业；\n2. 具备扎实的计算机基础，熟悉数据结构、算法、操作系统、计算机网络等基础知识；\n3. 熟悉 Python 编程语言，具备良好的代码能力和工程意识；\n4. 了解常见网络数据采集技术，有 Selenium、Scrapy、Playwright 等框架使用经验者优先；\n5. 熟悉 HTTP / HTTPS 等网络协议，能够理解常见 Web 请求、响应、Cookie、Session 等机制；\n6. 了解 HTML、JavaScript、CSS、XPath、正则表达式等 Web 基础技术，能够分析常见网页结构；\n7. 具备较强的问题分析和解决能力，能够针对复杂技术问题主动定位、分析并寻找解决方案；\n8. 对数据采集、网络协议、自动化、逆向分析等技术方向有兴趣，愿意持续深入学习；\n9. 具备良好的沟通协作能力，积极主动、自驱力强，有较强的责任心和执行力。",
"skills": [AI生成
"Python",
"JavaScript",
"数据结构"
],
"preferred_qualifications": "4. 了解常见网络数据采集技术，有 Selenium、Scrapy、Playwright 等框架使用经验者优先",
"job_highlights": "未披露"
},
"contact": {
"recruiter_name": "未披露",
"contact_methods": [
{
"type": "apply_link",
"value": "https://campus.163.com/app/detail/index?id=4792&projectId=103"
}
]
},
"posting": {
"posting_id": "103_4792",
"post_date": "",
"hire_time": "未披露",
"update_date": "20260917",
"job_url": "https://campus.163.com/app/detail/index?id=4792&projectId=103"
},
"fulltext": "数据采集开发工程师\n职位描述\n1. 参与网络数据采集系统的设计、开发、维护与优化，完成互联网公开数据的采集、解析、清洗和结构化处理；\n2. 参与爬虫程序的持续运营与迭代，及时发现并解决页面结构变化、接口变化、数据异常等问题，保障数据采集的稳定性和准确性；\n3. 参与爬虫性能及采集策略优化，包括任务调度、请求效率、资源占用、代理策略、异常重试及反爬机制分析等；\n4. 参与 Web / App 数据采集相关技术研究，包括网络协议分析、动态页面解析、接口分析及自动化采集等；\n5. 对采集数据进行基础统计、分析及质量校验，与数据工程、数据分析及业务团队协作，持续提升数据采集系统的有效性和可靠性；\n6. 持续关注数据采集、网络协议、自动化、AI Coding 等相关技术发展，并探索新技术在实际业务场景中的应用。\n\n职位要求\n1. 2027届本科及以上学历，计算机、软件工程、网络工程、信息安全、人工智能等相关专业；\n2. 具备扎实的计算机基础，熟悉数据结构、算法、操作系统、计算机网络等基础知识；\n3. 熟悉 Python 编程语言，具备良好的代码能力和工程意识；\n4. 了解常见网络数据采集技术，有 Selenium、Scrapy、Playwright 等框架使用经验者优先；\n5. 熟悉 HTTP / HTTPS 等网络协议，能够理解常见 Web 请求、响应、Cookie、Session 等机制；\n6. 了解 HTML、JavaScript、CSS、XPath、正则表达式等 Web 基础技术，能够分析常见网页结构；\n7. 具备较强的问题分析和解决能力，能够针对复杂技术问题主动定位、分析并寻找解决方案；\n8. 对数据采集、网络协议、自动化、逆向分析等技术方向有兴趣，愿意持续深入学习；\n9. 具备良好的沟通协作能力，积极主动、自驱力强，有较强的责任心和执行力。\n1. 参与网络数据采集系统的设计、开发、维护与优化，完成互联网公开数据的采集、解析、清洗和结构化处理；\n2. 参与爬虫程序的持续运营与迭代，及时发现并解决页面结构变化、接口变化、数据异常等问题，保障数据采集的稳定性和准确性；\n3. 参与爬虫性能及采集策略优化，包括任务调度、请求效率、资源占用、代理策略、异常重试及反爬机制分析等；\n4. 参与 Web / App 数据采集相关技术研究，包括网络协议分析、动态页面解析、接口分析及自动化采集等；\n5. 对采集数据进行基础统计、分析及质量校验，与数据工程、数据分析及业务团队协作，持续提升数据采集系统的有效性和可靠性；\n6. 持续关注数据采集、网络协议、自动化、AI Coding 等相关技术发展，并探索新技术在实际业务场景中的应用。\n1. 2027届本科及以上学历，计算机、软件工程、网络工程、信息安全、人工智能等相关专业；\n2. 具备扎实的计算机基础，熟悉数据结构、算法、操作系统、计算机网络等基础知识；\n3. 熟悉 Python 编程语言，具备良好的代码能力和工程意识；\n4. 了解常见网络数据采集技术，有 Selenium、Scrapy、Playwright 等框架使用经验者优先；\n5. 熟悉 HTTP / HTTPS 等网络协议，能够理解常见 Web 请求、响应、Cookie、Session 等机制；\n6. 了解 HTML、JavaScript、CSS、XPath、正则表达式等 Web 基础技术，能够分析常见网页结构；\n7. 具备较强的问题分析和解决能力，能够针对复杂技术问题主动定位、分析并寻找解决方案；\n8. 对数据采集、网络协议、自动化、逆向分析等技术方向有兴趣，愿意持续深入学习；\n9. 具备良好的沟通协作能力，积极主动、自驱力强，有较强的责任心和执行力。",
"standard_classification": {
"std_category_code": "T016",
"std_aux_codes": [],
"std_category_status": null,
"std_taxonomy_version": "20261104"
}
}