数据开发工程师(数仓)
1.2-1.6万上海市本科不限经验
职位描述
主要职责:
1、负责实时数仓开发、优化和治理工作。
编写和优化FlinkSQL/StarRocks SQL/Materialized View,支撑实时数据看板和人群画像需求。
设计和实施高效的数据模型与Data Pipline,确保数据的一致性和可扩展性。
与团队合作,开发和维护ETL(提取、转换、加载)流程。
监控数据质量和性能,确保数据准确性和及时性。
职位要求:
1、计算机科学、信息技术或相关领域的学士学位。
2、至少3年的数据开发经验,有实际的实时开发、实时数仓建设经验。
3、熟悉StarRocks/Doris、Flink、Spark、Hive等大数据组件的基本原理和使用,了解基本的调优。
4、熟悉Python/Java/Scala/Go等编程语言的一种或多种,有扎实的开发经验。
5、了解数据治理、数据质量、数据安全、湖仓一体等概念;备较强的trouble shooting能力,能够解决复杂的数据问题。
6、良好的沟通技巧和团队合作精神。
加分项:
有实际的实时湖仓、cdp系统建经验。
了解iceberg、paimon、hudi、deltaLake等湖存储的一种或多种。
有金融科技数据项目经验。
20,861+ 岗位更新等你来订阅
一键订阅最新的岗位,每周送达
🎉恭喜你,订阅成功
继续订阅您可以在邮箱中随时取消订阅