岗位描述
1. 参与网络数据采集系统的设计、开发、维护与优化，完成互联网公开数据的采集、解析、清洗和结构化处理； 2. 参与爬虫程序的持续运营与迭代，及时发现并解决页面结构变化、接口变化、数据异常等问题，保障数据采集的稳定性和准确性； 3. 参与爬虫性能及采集策略优化，包括任务调度、请求效率、资源占用、代理策略、异常重试及反爬机制分析等； 4. 参与 Web / App 数据采集相关技术研究，包括网络协议分析、动态页面解析、接口分析及自动化采集等； 5. 对采集数据进行基础统计、分析及质量校验，与数据工程、数据分析及业务团队协作，持续提升数据采集系统的有效性和可靠性； 6. 持续关注数据采集、网络协议、自动化、AI Coding 等相关技术发展，并探索新技术在实际业务场景中的应用。 1. 2027届本科及以上学历，计算机、软件工程、网络工程、信息安全、人工智能等相关专业； 2. 具备扎实的计算机基础，熟悉数据结构、算法、操作系统、计算机网络等基础知识； 3. 熟悉 Python 编程语言，具备良好的代码能力和工程意识； 4. 了解常见网络数据采集技术，有 Selenium、Scrapy、Playwright 等框架使用经验者优先； 5. 熟悉 HTTP / HTTPS 等网络协议，能够理解常见 Web 请求、响应、Cookie、Session 等机制； 6. 了解 HTML、JavaScript、CSS、XPath、正则表达式等 Web 基础技术，能够分析常见网页结构； 7. 具备较强的问题分析和解决能力，能够针对复杂技术问题主动定位、分析并寻找解决方案； 8. 对数据采集、网络协议、自动化、逆向分析等技术方向有兴趣，愿意持续深入学习； 9. 具备良好的沟通协作能力，积极主动、自驱力强，有较强的责任心和执行力。