技术能力

大数据相关
熟练掌握Java，Scala编程语言。熟悉linux基本命令与操作
熟练hadoop组件的安装与部署，如（hadoop,spark,hbase,hive,mysql,mongodb,kafka,flume）等
熟悉Hdfs文件存储系统、Map/Reduce离线并行计算
熟练Spark的使用，sparkstreaming实时获取kafka中数据，掌数据倾斜解决方案。
熟练使用MySQL,Hive等关系型数据库,对数据进行查询与操作
熟悉kafka工作机制及kafka与flume结合的使用。
熟悉Zookeeper分布式协调服务应用。
掌握Sqoop、Flume、Crontab定时器等辅助工具。
熟悉Hive系统架构，能够使用hive进行海量数据的查询分析，能够使用sqoop进行 关系型数据库与HDFS/Hive之间进行数据的导入导出，具有一定调优经验。
可以熟练操作数据库，如:mysql,hbase,mongodb等
熟悉spring boot，java，后端开发有自己的一套框架，可进行快速开发
前端采用VUE,UNIAPP.HTML，CSS及JavaScript技术

项目经验

数据可视化大屏，超12个大模块组成，gs地图开发，主要负责后端开发，使用spring boot服务开发
大数据综合管理平台，整体架构策划，使用sparkstreaming进行超亿数据的数据分析与采集，以hdfs文件系统以及es作为支撑
全文检索（内部），类似于百度搜索，hdfs作为文件存储，es作为全文检索，搜索内容包括文件里面的所有内容，可自定义设置分词，屏蔽禁词，登录分权限，以redis数据库作为用户账号密码的登录存储实现。
数据接口管理平台（对外），可将公司访问接口配置到平台，用户可进行登录，查看免费接口，可进行充值调用付费接口，用户通过支付宝进行付款获取相对应的积分。
小程序开发，目前做的小程序有 家政小程序，跑腿小程序，物流以及外卖小程序

团队情况