
工作职责:
1、负责业务平台大数据服务设计、研发和实施;
2、负责业务平台业务领域数仓构建,脚本开发、维护;
3、负责业务平台数据通用能力服务设计、研发;
4、负责大数据相关新技术的研究和落地;
5、负责搭建基于Hadoop/spark/storm/kafka/zookeeper/flink等的大数据平台;
6、负责数据分析和建模项目的业务需求分析及技术实现。
任职资格:
1、能够参与大数据项目整体解决方案的规划、设计、技术选型,并提出可行性较高解决方案;
2、能够熟练应用spark、storm、flink、hive、hbase、ES、kylin等大数据组件,熟悉部分组件底层原理和框架,并结合实际业务场景进行大数据应用面向不同场景,合理组合、封装、调优等;
3、能够应用数仓建模方法,设计构建数仓模型;
4、能够结合业务场景和数据资源,设计数据分析方案,组织分析团队,完成大数据分析;
5、能够结合业务需求分析并规划高可用大数据集群软硬件需求(如查询服务器、命名服务器、数据服务器等),以及部署架构和进程角色分布。