熟练java、scala后端开发
熟练spark大数据分析
熟悉python编程与数据处理
熟悉hadoop集群、hive的基础原理及其运行与维护
熟悉linux环境与shell脚本编写
熟悉oracle/mysql数据库,熟练sql数据分析,熟悉存储过程等常用关系数据库工具
熟悉jvm,擅长java程序的调试与性能调优
熟悉计算机专业各基础理论与经典算法
了解机器学习基础理论与相关算法
1.参与通用海量数据建模分析平台的后端开发,并负责后期运行维护。
平台使用hive作为分析引擎,使用tomcat作为java应用容器为前台提供任务提交、调度等服务。
2.负责某专业数据分析APP的后台分析引擎开发。
开发语言为scala,执行引擎为spark。