熟悉 hadoop 大数据框架及 python 数据分析,善于学习和沟通,喜欢挑战及创新。
> 网络编程:熟悉 Java 语言,熟悉 Spring、SpringMVC、Tomcat 网络开发;
> 数据库:熟悉 MySQL、Redis、MongoDB 等数据库技术;
> 大数据技术:熟悉 Hadoop 大数据开发框架,如 Flume、Kafka、Hive、HBase、Flink、Spark、Sqoop 等;
> 数据分析:熟悉 Python 语言,熟悉数据分析、网络爬虫等;
电商数仓(后台开发)
> 电商用户行为日志及系统业务数据的采集及处理(清洗,转义,分类,重组,合并,拆分,统计),并搭建数据仓库,为企业所有决策制定过程,提供所有系统数据支持的战略集合;
> 分析项目需求及技术选型,使用 Hadoop、Zookeeper、Flume、Kafka、Hive、Tez、Sqoop、Azkaban、MySQL、HBase 等技术,并对数据进行分层处理(ODS层、DWD层、DWS层、ADS层);
● 电商用户行为日志及系统业务数据的采集及处理(清洗,转义,分类,重组,合并,拆分,统计),并搭建数据仓库,为企业所有决策制定过程,提供所有系统数据支持的战略集合; ● 分析项目需求及技术选型,使用Hadoop、Zookeeper、Flume、Kafka、Hive、Tez、Sq
使用阿里云大数据平台构建数据仓库及业务分析,并使用QuickBI显示数据分析现况展示。 > 数据采集传输:Flume、DataHub、RDS > 数据存储及计算:MaxCompute、DataWorks > 数据可视化:QuickBI