python爬虫工程师
12-22K广州市本科1-3年
职位描述
职位描述:
1. 负责开发和维护爬虫系统,实现对特定网站数据的抓取和解析。
2. 参与爬虫系统的设计和优化,带领数据团队攻克数据采集与应用难题。
3. 负责处理爬虫系统中出现的异常情况,保证数据的准确性和完整性。
4. 配合团队成员进行数据分析和挖掘,为业务决策提供支持。
5. 参与数据采集、统计分析、监控等相关系统架构设计和研发任职要求:
1. 本科以上学历,计算机相关专业,熟悉操作系统(多线程、多进程)、计算机网络编程、数据结构与算法等基础知识。
2. 熟悉Python编程语言,具有良好的编程能力和代码规范,3年以上Linux环境下开发经验,熟练使用常用Linux命令。
3. 了解常见的网络爬虫框架,如Scrapy、BeautifulSoup等,并具有相关开发经验。
4. 3年以上大规模网页爬虫开发经验,深入了解浏览器原理、前端JS、AJAX,能解决前端动态JS混淆问题5. 具有团队合作精神,沟通能力强,能够有效与团队成员协作完成项目任务。
6. 对数据挖掘和机器学习有一定了解者优先考虑。
20,861+ 岗位更新等你来订阅
一键订阅最新的岗位,每周送达
🎉恭喜你,订阅成功
继续订阅您可以在邮箱中随时取消订阅
