数字广西集团大数据开发工程师 (职位编号：A5)

1.参与大数据平台架构设计和开发工作，包括平台组件选型及搭建、平台服务开发。

2.负责海量数据的采集、清洗、处理工作，支持数据开发的技术需求。

3.负责离线/实时的数据存储和加工处理，保证数据质量，负责数据监体系的建立和维护。

4.持续对系统的技术架构进行改进和优化，提升海量数据的查询性能和用户体验。

5.研究前沿技术，解决实际场景中的业务问题，优化离线/实时大数据计算任务的性能。

任职条件：

1.大学本科及以上学历，计算机或相关专业；

2.3年以上大数据开发经验；

3.熟悉Linux/Unix开发环境，熟悉python/java/scala/shell，扎实的数据结构和算法功底；

4.具有丰富的数据加工处理经验，对数据处理、数据清洗，数据建模等有深刻认识和实战经验；

5.熟练使用flink、spark等进行数据加工；熟悉hive和spark的编写和性能调优；

6.熟悉常用开源分布式系统，对Hadoop/Hive/Spark/Storm/Flink/HBase中的一项或多项有深入了解,能够独立排查及解决分布式系统的问题；

7.熟悉Docker和Kubernetes使用，有相关经验者优先；

8.清晰的逻辑分析和表达能力，热爱技术，乐于分享，对行业和技术的发展有自己的见解。