大数据存储研发工程师/专家(HDFS)
Company Kuaishou
Focus Tech · Backend
Location 北京
Published May 19, 2026
岗位职责
7 亿快手用户每天都在生产百 PB 级的数据,涵盖短视频、直播、用户画像、AI 训练样本等高价值数字资产。作为快手存储团队的核心成员,你将参与构建下一代 EB 级大数据存储系统,以极致性价比保障数据稳固,支撑离线计算、实时计算、数据湖、AI 训练等关键业务场景。
1、负责下一代 EB 级大数据存储的设计与研发,面向海量数据,提供高可用、高可靠、高吞吐、低成本的存储解决方案; 2、深入探索存储引擎、元数据管理、冷热数据分层等核心技术,持续提升稳定性、扩展性以及成本效率; 3、结合 NVMe、QLC SSD、RDMA 等前沿硬件技术,推动高性能存储架构在快手的落地。
任职要求
1、本科及以上学历,计算机相关专业,存储领域 3 年以上工作经验; 2、熟练掌握 Java,具备优秀的工程能力,对代码质量有极高要求; 3、熟悉 HDFS、Ceph、S3 等主流分布式存储系统,有实际调优或二次开发经验; 4、有强烈的责任心与进取心,具备较好的学习能力和沟通能力,能够快速的响应和行动; 5、逻辑清晰,能快速理解业务需求并抽象为技术方案,具备强自驱力和抗压能力。
加分项: 1、熟悉大数据生态组件(如 Yarn、Spark、Flink、Kafka、Hudi、Doris),理解其与存储系统的协同机制; 2、有大规模存储集群优化经验(如 QoS 控制、IO 调度、数据压缩/去重等); 3、开源社区活跃者。