1、具备政府、金融、物联网、互联网等行业从业经验
2、10年+开发经验,6年技术团队管理经验,具有0-1组建团队的经验
3、熟练掌握SpringBoot和Spring Cloud Alibaba全家桶开发分布式,高并发,高负载系统
4、熟练使用Sqoop、Flume等ETL工具
5、熟悉主流大数据计算平台的原理,熟悉处理框架MR/Flink/Spark,使用Scala、Java语言来编写Spark、Flink计算程序来处理
批、流数据,并结合实际情况来优化计算执行过程
6、熟悉Hadoop大数据生态,熟悉分布式系统的知识,熟悉Hadoop/Yarn/Hive/HBase等大数据技术,熟悉数据湖知识及Icebe
rg主流开源数据湖产品的使用
7、熟悉数据仓库建设、能够使用大数据生态圈相关组件自主搭建高可用可扩展的离线/实时数仓,或者融合数据湖与数据仓库的
优势,构建湖仓一体的一体化、开放式数据处理平台
8、熟悉Linux操作系统,具备Linux系统管理、环境部署和应用运维能力,熟练使用Git/Jenkins/Docker/Kubernetes等DevOps
工具,结合公司内部开发流程实现CICD自动化部署应用
1、具备政府、金融、物联网、互联网等行业从业经验
2、10年+开发经验,6年技术团队管理经验,具有0-1组建团队的经验
3、熟练掌握SpringBoot和Spring Cloud Alibaba全家桶开发分布式,高并发,高负载系统
4、熟练使用Sqoop、Flume等ETL工具
5、熟悉主流大数据计算平台的原理,熟悉处理框架MR/Flink/Spark,使用Scala、Java语言来编写Spark、Flink计算程序来处理
批、流数据,并结合实际情况来优化计算执行过程
6、熟悉Hadoop大数据生态,熟悉分布式系统的知识,熟悉Hadoop/Yarn/Hive/HBase等大数据技术,熟悉数据湖知识及Icebe
rg主流开源数据湖产品的使用
7、熟悉数据仓库建设、能够使用大数据生态圈相关组件自主搭建高可用可扩展的离线/实时数仓,或者融合数据湖与数据仓库的
优势,构建湖仓一体的一体化、开放式数据处理平台
8、熟悉Linux操作系统,具备Linux系统管理、环境部署和应用运维能力,熟练使用Git/Jenkins/Docker/Kubernetes等DevOps
工具,结合公司内部开发流程实现CICD自动化部署应用