10年java经验、精通爬虫,电子网,ic交易网,库存爬取,精通springcloud全家桶、dubbo、熟练JVM调优、Mysql索引优化等,一些主流框架、中间件也都用过,linux系统、docker容器也很熟悉,积累了大量解决问题的实战经验,独立开发过大型项目,开发过im应用,精通爬虫系统和数据采集,精通大数据cdh平台,精通hadoop,hbase,hive,flink,spark等大数据服务的开发和使用。精通海量数据分析和查询优化。
在多年的软件开发工作中参与了很多项目的开发,其中有很多项目都是自己独立搭建和开发的。大致有商城系统,IM即时通讯系统,搜索引擎系统,大数据分析系统,分布式爬虫系统等。有丰富的开发经验,能独当一面。
使用spingboot+netty开发一套即时通讯服务端,采用集群部署,提供高可用的IM服务。在有限机器内支撑几十万级别用户同时在线。
通过cdh大数据服务,为公司数据中台提供数据服务和数据支撑。完成了海量数据的分析和上亿级别数据毫秒级别响应。存储pb级别大数据。
支持节点多开发语言数据抓取,支持微信小程序数据抓取,手机app数据抓取 pc端网页数据抓取。有多年数据抓取经验精通Python,Java等语言