主要职责:
1.负责大数据平台架构的设计和构建;
2.负责大数据平台的优化,解决海量数据面临的挑战;
3.带领大数据技术团队实现各项数据接入与处理、数据仓库建设、数据分析与挖掘及数据展示;
4.负责大数据平台核心功能的开发。
任职要求:
1.必须要3年以上大数据架构经验,丰富的数据仓库、数据挖掘、机器学习项目经验 ;
2.必须要基于Hadoop的大数据体系有深入认识,具备相关产品(Hadoop、Hive、HBase、Spark、Storm、Flume、sqoop、Kafka、ES等)项目应用研发经验;
3.必须要深刻理解大数据处理(流计算,分布式计算,分布式文件系统,分布式存储等)相关技术和实现方法 ;
4.必须要精通海量存储、计算系统的架构和原理,具备丰富的大规模并发处理系统的研发和架构经验;