高级数据开发工程师

1、数据开发与平台维护 - 负责基于主流数据中台产品（含自研数据中台）进行数据集成、调度、加工与服务开发。 - 设计并实现面向主题的数仓模型（ODS、DWD、DWS、ADS），遵循维度建模与数据分层规范。 - 开发ETL/ELT任务，保障数据从源系统到数据仓库的高效、稳定流转。

2、数据治理实施落地 - 参与制定并执行数据标准、数据质量规则、元数据管理、主数据管理等治理策略。 - 基于中台产品实现数据质量监控体系，包括完整性、准确性、一致性、及时性等维度的规则配置与告警。 - 推动数据血缘、影响分析、数据地图等功能的建设与优化，提升数据可追溯性与可视化能力。 - 配合数据治理平台，完成数据资产目录的构建与维护，支持数据资产盘点与价值评估。

3、数据开发工程化与自动化 - 编写高质量、可复用的数据处理脚本（SQL、Python、Shell等），优化任务性能与资源消耗。 - 设计并实现数据开发流水线（CI/CD），支持代码版本管理、自动化测试与发布。 - 构建统一的数据接入规范与开发模板，提升团队开发效率与代码一致性。

4、跨系统数据集成与接口服务 - 对接多源异构数据（关系型数据库、日志、API、NoSQL、文件等），设计合理的数据同步方案。 - 开发数据服务接口（RESTful API、SparkSQL等），支持业务系统、前端应用、BI报表调用。

5、技术协作与知识沉淀 - 与产品经理、数据分析师、数据架构师紧密协作，理解业务需求并转化为数据解决方案。 - 编写技术文档、数据字典、开发规范，组织内部培训，推动团队能力提升。 - 持续跟踪数据中台与数据治理领域的新技术、新工具，推动技术创新与落地。

【任职要求】

1、学历背景：计算机、软件工程、信息管理、数学等相关专业本科及以上学历。

2、工作经验：6年以上数据开发经验，至少3年以上在数据中台或数据治理项目中的实战经验。

3、技术栈要求： - 精通SQL/UDF开发，熟练掌握Hive、SparkSQL、Impala、FlinkSQL、FlinkCDC等大数据计算引擎。 - 熟悉主流数据中台产品（如DataWorks、DataArts、Dataphin、Kettle、DataX、SeaTunnel等）的使用与二次开发。 - 熟悉Hadoop生态（HDFS、YARN、HBase、Kafka等）及常见任务调度及资源调度框架。 - 具备Python/Java/Scala中至少一种编程语言的开发能力。 - 熟悉数据建模方法论（如Kimball维度建模），有实际数仓设计经验。 - 了解数据治理核心内容：数据标准、数据质量、元数据、数据安全、数据生命周期管理。

4、项目经验： - 主导或深度参与过企业级数据中台建设项目，具备从0到1或从1到N的实施经验。 - 有数据质量规则设计、数据血缘追踪、数据资产目录建设等治理模块落地经验。

5、软技能： - 具备良好的沟通能力与团队协作意识，能跨部门推动问题解决。 - 具备较强的问题分析与解决能力，对数据敏感，注重细节。

6、优先考虑（加分项）：

- 有水利、水电、能源、政务、民爆等行业数据治理合规性（如GDPR、DCMM、数据安全法）实施经验。

- 熟悉数据安全与权限管理机制（如行级/列级权限、脱敏、加密）。

- 有元数据自动采集、数据血缘自动解析（通过解析SQL、任务依赖等）开发经验。

- 熟悉实时数仓、流批一体、湖仓一体、DataMesh等前沿数据架构理念。

- 有云原生数据平台（Informatica, Snowflake, Databricks, MaxCompute等）使用经验。

- 拥有CDGA\CDGP\CDMP等数据治理相关认证者优先。

年龄27-33、适应偶尔短暂出差/驻场支撑