本人10以上年工作经验,曾从事大型网站开发和架构以及大数据处理,现主要从事物联网产品研发。主要使用Java,Spring及Spring Cloud开发,曾使用Shell,Python,Go等语言开发过;熟悉Linux,KVM,Docker,Nginx,LVS等技术;熟悉ActiveMQ/MQTT,Memcached/Redis,Netty,Solr/Lucene等技术;熟悉Oracle、MySQL,MongoDB等数据库;熟悉Storm,Hadoop,Spark, Hbase等大数据技术;熟悉Dubbo/Dubbox,gRpc等服务框架;使用Maven,Jekins,Jira,Git等开发环境。对于新事物和新技术较感兴趣,正在学习Tensorflow中...
2012/02~2012/06 游戏蜗牛—广告管理系统 项目是为公司游戏进行广告推广而开发的管理系统。通过采集用户行为生成海量数据进行PV、UV等统计分析,并生成CPS,CPC等各种报告。产品运营后能等对打出的广告进行动态跟踪,为市场运营提供有力数据支持。在《九阴真经》公测首日,支撑住当日一亿+的PV量。
2012/10~2013/10 智慧芽—专利数据自动化处理系统 公司每周需要爬取20多个国家或地区的专利数据,标准化后再生成索引。原先由零散的工具处理,很多环节需要人工参与,严重影响效率,从后确立了自动化数据处理系统项目。系统基于Storm流计算技术框架设计,由分布在各个国家当地的VPS负责爬取数据(HttpClient/httpproxy/socketproxy/vps),提交给数据中心,在数据中心各个Storm节点按流程领取计算任务:抽取(HTML/XML/PDF解析),存储(MongoDB/GridFS/S3),索引(Solr)等环节。每周的专利数据只需要在管理页面建立任务,便可自动进行爬取/备份/解析/索引,并能对每条专利数据状态进行追踪统计,增加了数据准确性,大大减少了人力成本。
2015/04~2016/03 神州数码东区技术中心—轻量级政务Paas 神州数码智慧城市产品—东方红在中小城市的实施过程中显的过于臃肿,对于行业部门级的轻量级的需求更是无能为力。东区技术中心规划研发一个轻量级的可在政务部门内应用的Paas系统。产品技术选型由Docker虚拟化替换原先重量级的虚拟机级别的虚拟化;由服务自发现替换原先的手工配置;由轻量的反向代理替换原先的ESB总线;基于服务网关进行身份、权限、流量等认证和计量;提供用户门户,开发者门户以及运维门户。最终形成用于政务部门内部自建的Paas系统和公司自运营的Paas平台—服云网。