大数据开发工程师
13-18K
大数据开发工程师 13-18K
上海
本科
1-3年
发布于 11月14日
职位描述
Hadoop大数据hiveimpala
职位描述:
参与基础大数据平台的建设,数据仓库和大数据处理模块的研发;
参与基于Spark技术的海量数据的处理、分析、统计、挖掘工作;
基于hive框架的数据仓库的研发,维护;
根据需求使用Spark Streaming和Spark SQL\Core进行数据处理、查询、统计等工作。
熟悉大数据cdh版本的搭建使用调优;使用kudu+impala搭建一个数据平台

职位要求:
2年以上Spark开发经验:熟悉Spark相关技术,
熟悉Scala语言,对Scala原理、底层技术有深入研究者优先;
熟悉Spark Streaming和Spark SQL, RDD、DataFrame编程;
有hadoop、hive集群搭建及挖掘经验优先,熟悉Impala;
了解整个大数据生态圈组件如hdfs、HBase、Hive、Pig、ZooKeeper、kafka、storm等;
对新技术感兴趣,较强的学习能力,有优良的Trouble Shooting能力;
有过海量数据系统开发和数据分析挖掘经验者优先。
工作地址
上海市徐汇区漕河泾开发区
Nicole Wan刚刚活跃
- Recruiter

Nicole Wan - Recruiter

Hi~对我发布的职位感兴趣吗?打开App和我聊聊吧~
匹配度分析 立即分析

三个月内共 87 位应聘者投递了该职位,您的简历与该职位的匹配度为:323

较低
一般
较为匹配
非常匹配
公司信息
大连市卓客企业管理咨询有限公司
20-99人