熟悉shell、python、Java;数据库有Oracle、MySQL、PostgreSQL、MongoDB;大数据组件有HDFS、YARN、Flume、HBase、Hive、Hue、Impala、Kafka、Oozie、Spark、Sqoop、Zookeeper、Kerberos等等;能够编写自动化运维脚本、简单的爬虫脚本;部署大数据平台CDH、HDP,及平台运维;
中移互联网数据中台项目,在项目上,担任中台系统运维组长,大数据集群扩容,日常巡检shell、python脚本改造,集群主机漏洞修复;
传音大数据平台CDH部署与运维项目,在项目上,负责CDH大数据平台部署和运维;
该作品为传音CDH平台部署后的CM页面的各个组件状态页面,该平台部署的组件有HDFS、YARN、HBASE、Hive、Hue、Impala、Kafka、Oozie、Spark、Sqoop、Zookeeper
该作品分别为中台项目中所用到的python和shell日常巡检脚本,最后为大数据测试集群扩容两台数据节点时的截图。