数据采集助理实习
¥120元/天广州市专科不限经验
职位描述
岗位内容:
1.协助和参与大数据项目开发,配合研发工程师采集数据工作;
2. 设计和实现高效稳定的爬虫程序,收集海量数据并进行处理和分析;
3. 优化爬虫程序,提升抓取效率和准确性,降低被目标网站识别的风险。
岗位要求:
1.在校期间有python或javascript爬虫经验,大专及以上学历;
2.熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium等);
3.熟悉动态网页抓取、浏览器模拟抓取、app抓取等技术,熟悉使用fiddler或其他抓包工具;
4.具有js逆向,app逆向相关经验。熟悉ishook原理熟悉各种反爬风控常见手段:
5.了解数据的辨析、抽取、清洗、填补、平滑、合并、规格化及检查一致性等预处理技术方面的基本知识;
6.清楚对项目开发的流程和基本要求;
7.有良好的敬业精神、学习能力和团队协作能力
20,861+ 岗位更新等你来订阅
一键订阅最新的岗位,每周送达
🎉恭喜你,订阅成功
继续订阅您可以在邮箱中随时取消订阅