4年大数据平台服务经验,主做数据采集,数据分析,三方服务,数据仓库建设
主用技术栈,spark,hadoop,hive,kafka,JDBC服务
项目管理工具:maven,gradle
版本控制工具:git,svn
只做技术支持和出售产品
开源demo模板
大数据采集平台(主要用于数据平台的服务和管理)
https://github.com/zhaoyachao/zdh
开箱即用 支持多数据源 单独的调度器,调度也可和三方调度器对接airflow,azkaban 二次开发 下载链接为1.0版本,现最新版为3.0
此项目主要基于springboot和多种组件完成对接提供样列参考(kafka,disruptor,activemq,mybatis,shiro,redis,h5,quartz)等 基于shiro,redis的水平扩展成集群服务