大数据开发工程师

1、参与数据仓库、数据湖的架构设计与搭建，负责ETL（Extract，Transform，Load）流程开发，高效完成数据的抽取、转换和加载工作。

2、依据业务需求，设计并优化数据模型，确保数据的完整性、准确性和一致性，为数据分析、数据挖掘提供高质量的数据支持。

3、与数据分析师、业务团队紧密合作，理解业务需求，开发满足业务需求的数据报表、数据可视化应用，推动数据驱动的决策。

4、负责数据质量监控体系的搭建与维护，及时发现并解决数据质量问题，保障数据的可靠性和可用性。

5、持续优化数据处理流程，提高数据处理效率，降低资源消耗，确保数据处理任务按时完成。

6、参与大数据平台的日常运维，包括集群管理、任务调度、故障排查等，保障平台的稳定运行。

任职要求

1、本科及以上学历，计算机科学、统计学、数学等相关专业优先。

2、熟练掌握至少一种编程语言，如 Python、Java、Scala 等，具备良好的编程习惯和代码规范。

3、熟悉大数据开发框架，如 Hadoop、Spark、Flink 等，有实际项目开发经验者优先。

4、熟悉数据库技术，如 MySQL、Oracle、Hive 等，具备 SQL 编写和优化能力。

5、具备良好的数据敏感度和问题解决能力，能够快速定位和解决数据相关问题。

6、具有良好的沟通能力和团队协作精神，能够与不同部门有效沟通，共同推动项目进展。

7、有数据仓库建设、数据建模经验者优先考虑，对数据治理有一定了解者更佳。