1.熟悉java集合,多线程,jvm,mysql,spring,springboot,springcloud
2.熟悉kettle,了解Datax
3.熟练使用mybatis,kafka,redis,了解dubbo,zookeeper
4.熟悉hadoop,了解hive,spark,hbase
5.会使用python
1.项目介绍:商城网站,与一般商城不同的是先有人发布需求,货主看到这个需求后进行上传货物信息,然后需求方点击购买。
开发环境与整体技术:Myeclipse+maven+spring+springmvc+redis+mybatis+mysql+tiles.支付模块:集成支付宝支付,微信支付,银行卡快捷支付(接入的是连连支付)。短信验证及通知:网易云信第三方接口。大量图片上传到七牛云。快递物流信息查询:快递鸟第三方物流信息查询。
负责部分:数据库设计,框架搭建,后台业务逻辑的开发
2.数据资源平台系统
项目介绍:将不同来源(包括Oracle,postgres,mysql,sqlserver,redis,hbase,kafka,ftp,http)的数据汇聚到一个数据仓库中,以供其他子系统使用。在数据抽取的过程中需要根据业务需要来处理不同的数据,如图片上传云存储,过滤不符合条件的数据等等。
开发环境与整体技术:springboot+mybatis+zookeeper+kettle+kafka
负责部分:主要负责数据汇聚子系统的数据抽取部分,根据用户页面选择的配置,生成相应的kettle任务流程发送到datai(任务调度引擎)进行抽取数据。