ETL数据开发工程师

1、根据不同的业务场景，构建业务指标体系，建立和完善日常业务报告体系，能够及时、准确、完整的披露公司整体及各项目的运作情况 ；

2、参与数据仓库架构设计与数据开发，建设共享数据仓库 ；

3、通过专项分析，输出专项分析报告，为业务模块的决策和产品方向提供数据支持 ；

4、参与数据底层的工具、平台、部署流程等技术体系建设的研发工作。

5、负责数据清洗、标准化、去重、格式转换等处理工作，构建高质量、可复用的数据集。

6、维护和优化ETL作业的执行性能，提高数据处理效率，降低系统资源消耗。

7、参与数据建模，支持科研知识库、智能搜索引擎、AI科研助手等产品的数据需求。

8、监控和维护ETL任务，确保数据准确性、一致性和时效性，及时排查和解决数据问题。

职位要求：

1、计算机、通信等相关专业本科及以上学历，3年及以上相关工作经验；

2、熟悉数据仓库模型设计方法论，并有实际模型设计及ETL开发经验 ；

3、掌握大型数据库开发技术，如Oracle、MySQL等，掌握至少一种，灵活运用SQL实现海量数据ETL加工处理与查询性能调优；

4、掌握kettle，能设计稳定、高效、可扩展的数据管道。具备大规模数据加工处理（ETL）及运维相关经验，灵活运用各类SQL实现数据ETL加工处理；

5、熟悉常用的数据挖掘、分析的工具和方法，有数据挖掘工作经验；熟悉Linux平台，精通shell/java/js/python/等脚本语言的一种或多种，编码基本功扎实 ；

6、具备多数据源整合能力，能够整合API、数据库等不同数据源，构建统一的数据管理体系。

7、具备数据质量管理能力，熟悉数据清洗、异常检测、数据一致性检查方法。

8、具备快速学习能力、沟通协调能力及团队精神，有较强的责任心和学习积极性。