javaWeb后端开发、python爬虫、scala sparkcore、sql、steamming 业务开发及性能调优,flink实时业务处理,了解geoserver地图点位图层发布和使用,搭建过hive数仓,使用nifi、hive搭建数仓
参加过农业部农产品价格上报平台(javaWeb后端开发)、县域大数据系统开发(hdfs+yarn+spark+hive+hifi+javaWeb后端开发,自己搭建hadoop+spark+hive+nifi集群及开发javaWeb后端代码)
参与管理平台全部开发,更新平台、用户权限系统的部分模块,搭建hadoop+spark大数据平台、使用nifi抽数和streamming伪实时获取数据计算并转存应用数据库
参与设计农产品200指数的数据库、200指数数据的抽取、清洗,参与首页、品种分析数据查询模块的开发,其中用到的技术有(nifi、hive、spark,solr、javaWeb后端)