智慧校园大数据工程师
1.5-2.5万宁波市本科不限经验
职位描述
一、工作职责
1、数据ETL:基于业务需求进行数据可用性调研和可行性分析;能够收集数据并进行数据清洗、转换和存储;为业务部门提供稳定、高质量、高效的数据资产;
2、数据分析与建模:开发数据工具和算法,设计端到端的数据流架构,建立数据模型,并基于业务反馈进行模型评估和优化;
3、数据可视化:将数据分析结果以可视化的形式展示出来,并根据需求制作数据报告;
4、数据工程实现:提供数据采集、融合、加工处理、大规模数据流等场景的研发和工程实现;提供持稳定、高质量、高效的数据基础设施、数据应用和数据资产;
5、数据安全合规:负责数据安全合规与流通、数据质量、数据成本、个人隐私保护、数据治理、规范制定、元数据管理等数据管控工作。
二、任职要求
1、本科学历应具备10年及以上在高等院校、软件开发商、大型企业等机构工作的经验,研究生学历应具备5年及以上在高等院校、软件开发商、大型企业等机构工作的经验;计算机科学与技术、软件工程、信息与通信工程、电子科学与技术、数学系等相关专业优先;
2、5年以上数据仓库领域经验,熟悉数据仓库模型设计与ETL开发经验 ,具备海量数据加工处理(ETL)相关经验;
3、精通ORACLE/MySQL/PostgreSQL中的一种及以上数据库的运行机制和架构体系,精通数据库架构与设计,对数据库解决方案的优劣和适用场景有深入的理解,能够根据具体场景合理进行数据库选型和架构设计;
4、精通数据库优化,能够快速定位全链路上的性能瓶颈(网络、CPU、IO、操作系统等),并推动解决问题;
5、熟悉数据仓库领域知识和技能,包括但不局限于:主数据管理、元数据管理、数据开发测试工具与方法、数据质量等;
6、有分布式数据存储与计算平台应用开发经验,有Hadoop、Spark、Spark Streaming、Storm、Flink 等离线计算、实时计算数据研发经验;
7、熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察Java、Python,具有UDF/UDTF/UDAF开发经验,有数据挖掘经验;
8、加分项:具有优秀的工作表现、获奖经历;有过两个及以上大数据平台建设经验。
20,861+ 岗位更新等你来订阅
一键订阅最新的岗位,每周送达
🎉恭喜你,订阅成功
继续订阅您可以在邮箱中随时取消订阅