公司名称:某大型互联网公司
工作地点:丽江
职位描述:
1. 参与设计和开发数据仓库,数据产品的落地, 包括但不限于数据采集、数据建模、调度引擎、数据治理、数据服务等
2. 参与数仓日常需求的任务开发、 资源及性能的优化
3. 参与数仓平台新技术的选型,新技术的预研, 主流前沿技术的引入和落地, 包括但不限于: 存储、(流/批)计算引擎、多维分析及直接支持应用的各类数据产品
4. 参与开发流程的优化改造和数仓整体建设, 包括自动化测试等
任职资格:
1. 大专起推,4年以上数仓开发经验,对数据建模/实时数仓 有完整项目开发经验。
2. 4年以上的Java开发经验,可熟练开发MapReduce/Spark/Flink之一 , 具备数仓udf 开发能力。
3. 数据hadoop生态环境, 包括但不限于 Kafka/Hadoop/Hive/Spark/ES 组件的熟练使用。 阅读过源码、 有过二次开发经验者尤佳