持续更新!2021 最新实时计算及 Flink 大厂招聘信息汇总

2,241 阅读19分钟

大家好,为帮助大家更好的找到适合的岗位,拿到心仪公司的 offer,社区收集了多家实时计算及 Flink 企业用户的招聘需求,如:阿里巴巴、字节跳动、快手、网易云音乐、好未来、奇虎360、美团、小红书、爱奇艺、京东等招聘信息,整理如下,供大家参考。

欢迎更多企业投递实时计算及 Flink 相关招聘信息。相关需求可联系小松鼠(微信 ID:Ververica2019)。

本期招聘企业及岗位如下,找工作或有意向换工作的同学快到碗里来!

image.png

备注: 以下顺序按照招聘信息更新的时间排列。点击右下角的目录可直接定位心仪公司哦~

招聘公司及岗位一览

阿里云智能事业群 | 大数据计算平台研发专家(实时计算)
字节跳动基础架构团队 | 流式计算研发工程师
快手 | 实时计算引擎研发工程师/专家 & 分布式计算引擎研发工程师/专家
网易云音乐 | 数据平台开发工程师
好未来 | 数据平台高级开发工程师
奇虎360 | 大数据基础组件研发工程师
美团 | 大数据计算引擎研发专家
小红书 | Flink数据开发
爱奇艺 | 大数据存储服务高级研发工程师 & 大数据 OLAP 服务高级研发工程师 & 大数据实时计算服务高级研发工程师
京东 | 算法架构工程师(实时、离线方向)

阿里云智能事业群:大数据计算平台研发专家(实时计算)

基础信息:

工作年限:3 年以上

所属部门:阿里集团

学历:硕士

岗位职责

1. 基于 Apache Flink 在 Haddop/Kubernetes 生态上建设阿里巴巴实时计算平台,服务阿里巴巴集团所有实时数据分析业务;
2. 打造世界顶级的 Apache Flink 企业版软件 Ververica Platform,在全球范围内提供最便捷的实时计算云产品和服务;
3. 参与城市大脑,智慧交通等多项国家战略项目建设,利用实时计算技术处理海量真实世界中的高时效数据。

岗位要求

1. 具备扎实的计算机理论基础,对数据结构及算法有较强的功底;
2. 精通 java 语言编程,具备优秀的系统 Debug/Profiling 能力和经验;
3. 熟悉常见的面向对象设计模式,具备优秀的系统架构设计能力;
4. 熟悉 Flink/Spark/Hadoop/K8S 等开源大数据和容器技术,在开源社区活跃者优先;
5. 熟悉 Spring/MyBatis/Angular/React 等微服务和 web 相关技术者优先;
6. 具备大规模 Hadoop/K8S 生产集群管理实践者优化。

我们鼓励人人践行公益,同学如参与过公益活动,有相关证明,也欢迎附在简历中。参考依据包括但不限于:全国志愿者服务信息系统开具的志愿服务证明、“人人3小时”公益平台公益时证书、志愿服务组织(含社会团体、社会服务机构、基金会)授予的志愿服务证明等。

简历投递

字节跳动基础架构团队:流式计算研发工程师

团队介绍:

流式计算团队负责公司内部流式计算应用场景, 支撑了AML/推荐/数仓/搜索/广告/流媒体/安全和风控等众多核心业务。当前流式计算主要以 Flink 计算引擎为主,面临的挑战是超大单体作业(千万级别 QPS),超大集群规模(上万台机器)的应用场景,在 SQL, State&Checkpoint, Runtime 都有深度优化。

岗位职责

1. 构建高效,实时,稳定的流式计算引擎,支撑字节跳动公司内数多个产品线的推荐和广告业务;
2. 构建高性能,高易用的 SQL 引擎,支撑特殊场景 SQL 语法,优化 Streaming SQL 任务性能;
3. 构建基于 SQL 的批流统一计算引擎,支撑部分核心业务实时/离线统一的应用场景;
4. 探索流式计算在新兴硬件,实时数仓,机器学习,准实时交互式查询等技术解决方案。

岗位要求

1. 自认为是技术 Geek,具备很强的问题解决能力;
2. 精通 Java/C++/Go 等编程语言之一或多个;
3. 具备扎实的计算机理论基础, 对数据结构及算法有较强的功底;
4. 具备并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案;
5. 对开源计算框架 Flink/Calcite/Storm/Kafka/Yarn/Hive/Spark/Kubernetes 有一项或多项深入研究和相关经验者优先;
6. 对实时计算,离线计算,OLAP,机器学习有深入研究和经验者优先。

简历投递

快手:实时计算引擎研发工程师/专家【数据架构】& 分布式计算引擎研发工程师/专家【数据架构】

实时计算引擎研发工程师/专家【数据架构】

岗位职责

1. 参与快手实时计算引擎(Flink)系统的研发与优化工作,构建流批融合数据引擎,支持公司内丰富的流批计算需求及重大活动,解决实际业务需求与性能问题;
2. 接受大数据平台系统设计与实现复杂度的挑战,分析和发现系统的优化点,负责推动系统的合理性、可靠性、可用性的提升;
3. 和开源社区保持交流,从社区引入对公司业务场景有帮助的特性与系统,或将内部研发的功能贡献到社区。

岗位要求

1. 计算机或相关专业本科及以上学历;
2. 熟悉主流的分布式计算引擎(至少一个),精读过 Flink 源代码者尤佳,有开源系统二次开发经验或者所开发代码被开源社区接受者尤佳;
3. 优秀的设计与编码能力,工程质量自我要求高,针对业务需求与问题,可快速设计与实现解决方案;
4. 思维活跃,具备较强的问题分析与解决能力,强烈的责任心,对工作有激情,良好的沟通能力。

简历投递

分布式计算引擎研发工程师/专家【数据架构】

岗位职责

1. 参与快手 EB 级大数据平台分布式计算引擎相关系统的研发与优化工作,解决实际业务需求与性能问题。子系统包括但不限于 FLINK/HIVE/SPARK/PRESTO/DRUID/CLICKHOUSE 等;
2. 接受大数据平台系统设计与实现复杂度的挑战,分析和发现系统的优化点,负责推动系统的合理性、可靠性、可用性的提升;
3. 和开源社区保持交流,从社区引入对公司业务场景有帮助的特性与系统,或将内部研发的功能贡献到社区。

岗位要求

1. 计算机或相关专业本科及以上学历;
2. 熟悉主流的分布式计算引擎(至少一个),精读过源代码者尤佳,有开源系统二次开发经验或者所开发代码被开源社区接受者尤佳;
3. 优秀的设计与编码能力,工程质量自我要求高,针对业务需求与问题,可快速设计与实现解决方案;
4. 思维活跃,具备较强的问题分析与解决能力,强烈的责任心,对工作有激情,良好的沟通能力。

简历投递

网易云音乐:数据平台开发工程师

岗位职责

1. 负责云音乐大数据平台和工具的开发和运维工作:实时、离线、机器学习相关, 提升相关开发的工作效率;
2. 负责批流一体开发工具设计开发工作, 支撑云音乐算法、统计需求, 提升整体音乐整体数据的实时性;
3. 保障整体云音乐数据链路的稳定性、数据的准确性, 提高整体数据链路的可维护性;
4. 优化整体大数据平台资源使用,提高资源利用率,降低整体使用成本;
5. 调研落地当前大数据相关的最新技术,持续落地扩充平台大数据能力,优化整体服务性能和效率。

岗位要求

1. 3年以上工作经验,计算机等相关专业本科以上学历;
2. 熟悉 Flink/Spark/Kafka/Zeppelin/Livy 等大数据相关组件,能够进行相关方案的设计、优化及问题处理, 有PB级数据实时和离线数据处理任务开发和运维的经验;
3. 熟悉分布式系统架构,有大型分布式系统架构经验;
4. 良好的沟通表达能力和小组领导协作能力,勤奋好学,能够承受周期性的项目工作压力;
5. 具备 JAVA/python 基本的开发能力,拥有良好的业务理解能力,有机器学习经验或向开源社区贡献过源码者优先。

简历投递

好未来:数据平台高级开发工程师

好未来是一家教育科技公司、美国上市公司。旗下有学而思培优、学而思网校、爱智康1V1等教学品牌。当前岗位属于集团总部数据中台,支撑全集团进行数据分析工作。办公地点在北京中关村科贸电子大厦。

岗位职责

1. 设计实时分析平台、算法平台、分钟级数仓等平台系统;
2. 开发实时平台、算法平台、分钟级数仓相关模块,并上线运营;
3. 周期性进行技术沉淀分享工作,协助新成员熟悉和完成相关工作。

岗位要求

1. 本科以上学历(重要)、3-5 年以上 Java 开发经验;
2. 熟悉 JavaWeb 开发,能够独立完成后端系统搭建;
3. 熟悉 Flink、Kafka、Hbase 等实时开发相关技术栈;
4. 熟悉分布式服务开发技术,了解 K8S、消息队列、Redis、秒杀、调度系统原理优先;
5. 有过大数据、高并发项目开发经验,实时平台后端功能开发、算法平台后端功能开发优先。

挑战与成长

  • 从零开始搭建算法平台打造全流程一站式算法平台、实现高并发场景下的特征服务、搭建基于 K8S 的弹性伸缩的模型部署服务;

  • 从零开始搭建分钟级数仓支撑企业数据分析实时化,实现海量数据一站式集成、ETL 加工和数据毫秒级响应查询;

  • 升级迭代数据开发平台,实现离线数据、实时数据、算法数据的高效开发;

  • 团队氛围 nice,技术栈包括 JavaWeb 和大数据,支持内部转大数据开发岗位。

简历投递

奇虎360:大数据基础组件研发工程师

团队介绍:

我们负责奇虎360内部整个公司大数据基础架构的研究建设和推广使用,以技术深研为根本驱动,以业务价值为立足之本,通过提升大数据相关解决方案的可用性、易用性、稳定性,为公司业务的发展不断提供强大的动力。目前,适逢大数据技术的发展来到了一个新的阶段,以云化、智能化、湖仓一体化为特征的新一代大数据解决方案已经基本成型,但还需要进一步的优化和场景落地,我们期待同样对技术感兴趣的你的加入,共同为中国网络大安全建设而一起努力。

岗位职责

1. 参与 Flink/Spark/Yarn/Presto/Druid/Doris 等大数据基础组件的二次开发;
2. 参与云原生、数据湖、云化数仓等新一代大数据技术的研发与落地;
3. 参与推进公司大数据体系的持续改进,持续提升平台架构稳定性和性能。

岗位要求

1. 985/211 本科或以上学历,计算机、通信、数学等相关专业,具备良好的计算机技术基础知识沉淀;
2. 熟悉 Java,具备扎实的数据结构和算法基础;
3. 责任心强,具有较强的团队沟通和协作能力;
4. 深入理解 Flink/Spark/Yarn/Presto/Druid/Doris 一个或多个原理者优先;
5. 有 PB 级数据处理经验和组件开发经验者优先。

简历投递

美团:大数据计算引擎研发专家

岗位职责

1. 负责构建美团分布式离线/实时计算平台,支撑多场景(如数仓生产、事件处理、机器学习等)业务需求;
2. 解决流计算场景下高可用问题,通过自研 Flink HA 架构,支撑数万 Flink Job 稳定运行,保障TB级状态下线上实时数据 99.99% 的可用性;
3. 解决数仓生产场景下业务规模增长带来的引擎扩展性问题,通过自研 Remote Shuffle Service 架构以及引擎内核改造,支撑每天百万级 Spark Job,EB 级数据处理,单作业百 TB Shuffle,不断提升生产引擎稳定性和扩展性,保障核心数据的稳定产出;
4. 解决数仓场景下 T+1 计算的时效性问题,通过探索增量计算架构,支撑千亿规模数据复杂计算近实时就绪;
5. 解决流和批两套架构的计算口径问题,推动流和批的计算引擎融合,推动语义层、计算层、存储层统一,推进流批一体;
6. 综合调度、引擎层内核改造优化等多种技术方案持续提升计算效率,降低计算成本。

岗位要求

1.计算机基础知识良好,对大数据计算感兴趣;
2.具有主流大数据计算引擎(包括但不限于 Flink、Spark、Mapreduce、Hive、Storm)的实际应用经验和原理了解,有引擎优化或平台化的经历;
3.对后台开发技术栈有深刻理解,有高并发、高可用服务经历;
4.有较强的技术好奇心和自驱力,了解行业最佳实践。

加分型:

  • 参与过大型开源项目,尤其是在Flink/Spark、Kafka等引擎方面贡献过社区代码;
  • 完整参与过企业级数仓建设,或有数仓平台化的经历;
  • 具有存储系统读写优化相关工作经验;
  • 能以结果和价值为导向,利用科学的方法进行指标收集、统计、分析,从而进行成果的衡量。

简历投递

小红书:Flink 数据开发

岗位职责

1. 参与小红书分布式实时计算引擎的开发设计工作,满足毫秒级延迟、百万级吞吐的处理要求;
2. 参与实时计算管理平台的开发设计工作,为公司提供统一的实时应用开发管理平台和服务,提升应用开发的效率,降低运维成本;
3. 参与公司核心实时业务系统的架构设计,包括实时推荐/实时报表/实时数据交换等核心业务。

岗位要求

1. 要求熟悉Flink/Spark等分布式处理引擎,熟练使用kafka/rocketmq等消息中间件;
2. 精通java/scala等编程语言,精通数据结构和算法;
3. 对技术有热情,通过技术和团队合作来解决业务上的挑战。

简历投递

爱奇艺:大数据存储服务高级研发工程师 & 大数据OLAP服务高级研发工程师 & 大数据实时计算服务高级研发工程师

大数据存储服务高级研发工程师

岗位职责

1. 参与爱奇艺数据湖建设,打造统一大数据存储,实现智能冷热分级机制、统一路由、跨集群 HA 等功能;
2. 参与大数据智能运维平台开发,推进运维自动化、平台化、智能化;
3. 负责 HDFS、HBase、Alluxio 等服务的深入研究与优化,解决大规模分布式场景下的问题与挑战,保障服务稳定、高效,并推进服务架构的迭代升级。

岗位要求

1. 计算机相关专业,本科以上学历,三年以上工作经验;
2. 熟悉 HDFS、HBase、Alluxio 等大数据相关存储服务的原理,有大规模集群的实践经验;
3. 有 SRE 体系的开发能力和大规模集群的自动化运维经验,具备工程化解决问题思维,有运维平台开发经验者优先;
4. 熟练掌握 Java,有良好的开发经验及 trouble shooting 能力;
5. 操作系统、网络、硬件等计算机基础知识扎实,有丰富的排障调优经验;
6. 热衷开源技术,有开源社区贡献的优先,请在简历里说明;
7. 有责任心,做事踏实,具有良好的团队合作精神和沟通能力。

大数据 OLAP 服务高级研发工程师

岗位职责

1. 参与爱奇艺大数据 OLAP 服务体系建设,负责 Hive、Kylin、Presto、Druid、Iceberg 等服务的深入研究与优化,保障海量数据分析场景下的服务稳定与查询高效;
2. 参与智能 SQL 引擎开发,实现多 OLAP 引擎的智能路由、查询降级、熔断、SQL 审计、异常诊断等功能,降低数据分析门槛,提升查询效率;
3. 参与湖仓一体、实时分析等架构升级改造,推进数据实时化;
4. 持续跟进数据库领域的前沿技术,推进 OLAP 服务体系向前演进。

岗位要求

1. 计算机相关专业,本科以上学历,两年以上工作经验;
2. 掌握数据库知识,有海量数据场景下的大数据 OLAP 服务的实践经验,对以下服务之一有深入研究:Hive、Impala、Kudu、Kylin、Druid、Presto、Hudi/Iceberg 等;
3. 熟悉 OLAP 生态,能区分不同服务的优缺点、使用场景,可以根据业务需求进行数据库选型;
4. 熟练掌握 Java,有良好的开发经验及 trouble shooting 能力;
5. 操作系统、网络、硬件等计算机基础知识扎实,有丰富的排障经验;
6. 有大规模集群的自动化运维经验,熟悉 Ansible 等语言者优先;
7. 热衷开源技术,有开源社区贡献的优先,请在简历里说明;
8. 有责任心,做事踏实,具有良好的团队合作精神和沟通能力。

大数据实时计算服务高级研发工程师

岗位职责

1. 参与爱奇艺大数据实时计算服务体系建设,支持基于 Spark/Flink/Kafka 的实时计算平台开发,提供一站式实时数据集成、处理、分析等服务,简化数据使用,提升数据开发和分析效率;
2. 负责 Spark、Flink、Kafka 等服务的深入研究与优化,保障实时计算的稳定性;
3. 参与实时业务的架构优化,推进流批一体、实时数仓、数据湖方案的落地,支持实时应用。

岗位要求

1. 计算机相关专业,本科以上学历,两年以上工作经验;
2. 有大数据技术领域工作经验,熟悉 Flink、Spark、Kafka 等开源服务,对其中至少一项有深入研究,有大数据工具开发经验者优先;
3. 具备扎实的 Java 基础,熟练掌握 Java、Spring boot 开发,有良好的 Java 项目开发经验;
4. 操作系统、数据结构、算法等基础知识扎实,有很强的学习能力;
5. 热衷开源技术,有开源社区贡献的优先,请在简历里说明;
6. 有责任心,做事踏实,具有良好的团队合作精神和沟通能力。

简历投递

  • 工作城市:上海

  • 简历投递:liangjianhuang@qiyi.com

    邮件主题:职位名称{职位名称}-{姓名}

    简历文件名格式要求:职位名称{职位名称}-{姓名}

京东:算法架构工程师(实时、离线方向)

岗位职责

1. 构建高效稳定的超大规模数据批式、流式计算引擎框架;
2. 探索在线机器学习,图计算,准实时交互式查询等技术解决方案;
3. 构建完整的样本处理、特征服务、模型训练、模型预估组成的机器学习模型系统。

岗位要求

1. 具备很强的架构思维以及问题解决能力;
2. 精通 Java/Python/C++ 等编程语言之一或多个;
3. 具备扎实的计算机理论基础, 对数据结构及算法有较强的功底;
4. 具备并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案;
5. 对开源计算框架 Flink/Spark/Storm/Kafka/Hive/Hadoop/Yarn 有一项或多项深入研究和相关经验者优先;
6. 对机器学习, 图计算,OLAP 有深入研究和经验者优先。

简历投递