岗位职责:1.协助项目经理/独立完成项目开发
2.负责公司数据产品的数据采集,清洗,加工及统计分析,以及数据处理功能的开发,编写相关文档
3.参与数据映射、数据质量分析、数据差异分析
4.负责公司数据产品功能开发;
5. 完成上级临时交付的工作任务
任职资格:1.2年以上数据仓库项目实施经验,独立完成数据处理开发工作,负责过一个完整项目;
2.熟练使用Flink开发实时计算任务,具备基于DolphinScheduler搭建复杂工作流调度系统的实战经验;
3.熟悉ETL开发,熟悉Apache Hudi数据湖架构设计与优化;
4.熟练使用数据采集和接收工具,熟练使用flume+kafka优先;
5.熟悉Hadoop生态圈技术,具有源码阅读及二次开发工作经验;
6.熟练使用SQL,熟悉数据库原理,熟悉mysql;
7.熟悉Linux操作系统,熟练使用常用命令,熟练使用shell脚本;
8.熟练使用高性能缓存工具,熟练使用redis优先;
9.具有清晰的系统思维逻辑,对解决行业实际问题有浓厚兴趣,良好的沟通协调能力及学习能力。
2.负责公司数据产品的数据采集,清洗,加工及统计分析,以及数据处理功能的开发,编写相关文档
3.参与数据映射、数据质量分析、数据差异分析
4.负责公司数据产品功能开发;
5. 完成上级临时交付的工作任务
任职资格:1.2年以上数据仓库项目实施经验,独立完成数据处理开发工作,负责过一个完整项目;
2.熟练使用Flink开发实时计算任务,具备基于DolphinScheduler搭建复杂工作流调度系统的实战经验;
3.熟悉ETL开发,熟悉Apache Hudi数据湖架构设计与优化;
4.熟练使用数据采集和接收工具,熟练使用flume+kafka优先;
5.熟悉Hadoop生态圈技术,具有源码阅读及二次开发工作经验;
6.熟练使用SQL,熟悉数据库原理,熟悉mysql;
7.熟悉Linux操作系统,熟练使用常用命令,熟练使用shell脚本;
8.熟练使用高性能缓存工具,熟练使用redis优先;
9.具有清晰的系统思维逻辑,对解决行业实际问题有浓厚兴趣,良好的沟通协调能力及学习能力。
职位类别: 其他
举报温馨提示
- 你可能感兴趣的职位
- 最近浏览记录
-
12-19K/月
-
6.5-7K/月
-
20-30K/月
-
20W以上/年
-
5-7K/月
-
4-5K/月
-
6-7K/月
-
6-10K/月
暂没有相关信息
- 所属行业:互联网/电子商务
- 所在地区:广东-深圳市
- 联系人:
- 手机:会员登录后才可查看
- 邮箱:会员登录后才可查看
- 邮政编码:
工作地址
- 地址:深圳市福田区深南大道7006号万科富春东方大厦1607






