数据湖存储
65-100K · 15薪
数据湖存储 65-100K · 15薪
北京
本科
经验不限
发布于 4月17日
职位描述
JavaScalaCSSSpark大数据

数据引擎-数据湖团队,旨在打造业界领先的 EB 级超大规模数据湖,支持众多业务线,如电商等等。同时基于内部最佳实践,在引擎上打造一款云原生实时湖仓一体的 toB 产品——湖仓一体分析服务LAS(LakeHouse Analytics Service)。

职位描述:
1、打造业界领先的基于 HUDI 构建的 EB 级湖仓一体解决方案,支撑字节跳动众多核心业务线(如抖音,今日头条,电商)和 ToB 业务;
2、负责围绕数据湖构建一站式全托管优化服务,数据湖内核的极致优化,以及流批一体的数据湖加速层的设计与研发;
3、负责数据湖存储的生态研发,与 Spark、Flink、Presto、Hive 等计算引擎深度结合;
4、与开源社区紧密合作,持续构建开源影响力,有机会成长为 HUDI committer / PMC。
职位要求
1、具备良好的 Java / Scala 编程基础和良好的计算机技术基础,同时具备良好的沟通能力和团队协作能力;
2、熟悉开源数据湖存储方案 Hudi,Iceberg,Delta Lake 的原理及源码,有内核开发经验或社区贡献者优先,开源社区 committer / PMC 优先;
3、精通任一个 Parquet,ORC,Arrow 列存格式,或者 Avro,Protobuf 行存格式者优先;
4、熟悉 Spark、Flink、Presto、Hive 等主流大数据计算引擎者优先。
工作地址
海淀区
相似职位推荐
黄盼盼今日活跃
字节跳动 - 高级技术专家职位描述 - 参与高德商家平

黄盼盼 - 高级技术专家职位描述 - 参与高德商家平

Hi~对我发布的职位感兴趣吗?打开App和我聊聊吧~
匹配度分析 立即分析

三个月内共 87 位应聘者投递了该职位,您的简历与该职位的匹配度为:323

较低
一般
较为匹配
非常匹配
公司信息
字节跳动
互联网
民企
10000人以上
全员持股,创新引领未来。字节跳动是一家技术驱动的移动互联网公司,公司致力于采用先进的推荐引擎技术,提供基于移动设备的信息分发解决方案。公司的主要产品“今日头条”资讯客户端,是一款基于数据挖掘技术的个性化推荐引擎产品,致力于帮助用户在移动互联网上方便快捷地获取最有价值的信息,它会根据用户的兴趣为其推荐内容,对传统信息的分发方式产生了巨大颠覆。“今日头条”的团队是一支拥有丰富创业与成熟公司经验的技术驱动型团队,聚集了来自国内外顶级高校和一流公司的顶尖人才,其推荐引擎、机器学习、数据挖掘等技术在全球视野内拥有竞争优势。 自2012年8月推出后,“今日头条”迅速获得市场认可,长期占据苹果应用商店新闻类榜首。随着大众用户的阅读行为广泛向移动设备迁移,字节跳动获得了高速发展,在行业内已建立起了极高的品牌知名度与影响力。在夯实国内市场的同时,字节跳动也在积极进行国际化部署,目标在全球范围内提供先进的移动互联网信息分发服务,成为全球领先的移动互联网公司。
公司在招职位 查看全部