大数据开发工程师
25-45K
大数据开发工程师 25-45K
北京
本科
经验不限
发布于 5月11日 BOSS直聘
职位描述
大数据开发经验
职位描述
1. 参与集团级别离线和实时数据仓库建设,确保数据仓库的稳定性和可扩展性。
2. 负责处理和整合来自各种数据源的结构化和非结构化数据,进行数据清洗、转换和加载(ETL),确保数据的一致性和完整性,并优化数据加载和处理的性能。
3. 对数据仓库任务进行性能分析和优化,识别并解决性能瓶颈,提高数据处理和查询的效率。
4. 负责日常的数据仓库运维工作,监控任务性能和稳定性,解决技术问题和故障。
职位要求
1. 精通Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础;
2. 熟练掌握大数据处理框架,如Hadoop、Spark、Flink等,并具有相关实际项目经验。
3. 熟悉数据仓库设计和维护,具备数仓建模、ETL开发及数据迁移经验。
4. 具备良好的沟通能力和团队合作精神,能够与多个业务和技术团队合作,协调解决问题。
5. 具备良好的问题分析和解决能力,能够独立识别和解决技术问题。
工作地址
北京元中心海淀区元中心
相似职位推荐