公众号：杨建荣的学习笔记 · 作者：杨建荣 · 发布：2022-06-20 15:20:04 · 原文链接

飞凡汽车 （新能源汽车）

职位：大数据平台-数据平台研发岗位

地点：上海安亭

薪资：年包45w以内

工作职责：

1）负责业务的数据对接研发管理

• 参与数据对接的可行性调研、数据接口的研发、（实时、离线）udf函数编写等。

• 负责ETL开发、数据清洗、数据分发等任务管理，保障数据接口的持续稳定性，支撑业务需求。

• 对接大数据数仓开发工程师，交付清洗完成的结构化数据。

2）负责大数据基础平台研发运维

• 参与自研实时FLINK SQL平台的二次迭代，升级FLINK版本，集成FLINK CDC及其他组件（不限于FLUME等），提升实时平台的功能。

• 负责大数据相关组件的管理，制定运维方案和组件原理的梳理，协同大数据运维工程师和云服务运维工程师一起进行组件及集群的稳定性保障。主要围绕kafka、clickhouse、gp数据库等组件的运维，保障业务的使用。

• 参与调研不同大数据技术栈及组件的优缺点及业务场景，从数据采集、数据存储、数据加工、数据服务等方面进行对比，输出对比报告，协助平台架构进行业务技术选型。

工作要求:

1. 3年以上Java研发经验，具有一定的网络、主机、运维等知识。

2. 具有1年以上数据ETL开发经验，精通FLINK SQL，参与了解过FLINK集群故障处理，深入了解FLINK相关原理。

3. 熟悉FLINK CDC组件，精通MySQL、Kafka、Clickhouse等使用，了解数据流程及原理。

4. 具备Apache官网及github项目源码阅读能力，能够独立下载、修改、打包、部署项目。

5. 严谨的思维逻辑能力，能够从工作中发现问题，勇于承担使命，将问题固化并解决，具备平台化改造能力和思维。

联系方式：649726274@qq.com