熟练使用socket、solr、zookeeper等技术。
熟练使用hadoop、hbase、hive、spark等主流大数据框架。
能够独立完成hadoop集群的搭建和调试优化,能够独立完成solr集群的搭建和优化。
熟练使用linux操作系统,熟悉linux基本命令。
熟悉JavaScript、CSS等网页设计语言
熟悉 JSP、Servlet、XML等WEB开发技术
熟练easyUI、bootstarp前端框架
熟悉Struts、Hibernate、Spring、springside等J2EE企业架构核心技术
熟练MYSQL、SQLServer、Oracle等各种数据库操作会使用Eclipse、Dreamweaver等开发工具
熟练Tomcat、JDK等WEB服务器的应用
熟练eclipse、myeclipse平台,熟练在weblogic或tomcat服务下编程,
对于struct、hibernate、spring、springside技术框架应用精通、
熟悉javascript、xml、jquery、commons-fileupload等技术,
数据库主要使用的是oracle、mysql、SQL server
对于.net等语言也熟悉
有规范的开发文档写作能力
熟悉websocket通信技术
会使用easyui、bootstrap等前端框架
熟练使用solr部署开发技术
熟练使用hadoop、zookeeper、hbase等大数据相关技术
能够独立搭建hadoop相关集群,并维护优化集群
管理综合应用系统所属公司:
北京博艺网讯科技(武汉)有限公司
项目描述:
1、依托大数据架构为底层处理海量数据
2、对各区域采集数据设备进行管理
3、对数据进行各类统计、查询
4、对数据进行各类分析
责任描述:
1、底层架构的优化维护
2、底层数据接口的编写
3、数据入库统计
4、应用层对外接口编写
5、各类文档的编写
数据中心平台所属公司:
北京博艺网讯科技(武汉)有限公司
项目描述:
1、构建公司通用大数据平台
2、集中处理优化海量数据存储
3、提供通用接口
4、优化数据存储结构
5、使用hadoop、hbase、flume、spark、solr等组件搭建底层架构处理海量数据(日均5000W+)
责任描述:
1、数据中心对外接口的协调
2、个性化接口业务的开发
3、系统平台的搭建
wifi认证所属公司:
北京博艺网讯科技(武汉)有限公司
项目描述:
1、提供wifi上网认证功能
责任描述:
1、整体项目编码
卡口后台管理系统所属公司:
北京博艺网讯科技(武汉)有限公司
项目描述:
1、以hdfs、hbase、hive、impala为底层架构处理海量数据
2、对采集数据进行查询管理
3、对数据进行有效分析
责任描述:
1、需求的整理确定
2、对底层架构维护优化
3、整体项目进度把控
4、模块编写
5、按照职能进行分工
综合信息查询系统所属公司:
武汉奥浦信息技术有限公司
项目描述:
该项目是为政府安全部门提供快速高效的情报分析平台,
拥有人物分析,好友分析等功能,快速高效定位个人。实现一键式查询人物相关所有信息。
底层使用大量算法,从庞杂的数据中分析有价值的数据为前端展示提供数据支撑。
该系统使用hadoop+hbase+hive+solr的分布式底层架构,为查询效率,和算法提供平台。
前端使用springside+mysql为基础,提供数据展示平台。
该项目由我带领6人团队从需求采集,开发实现。
责任描述:
在本项目中本人主要是作为Leader的角色统筹整个项目。
在项目中,本人主要负责整体项目架构的设计与实现。并且搭建了hadoop+hbase+hive+solr的服务器集群。
大数据智能分析平台所属公司:
武汉奥浦信息技术有限公司
项目描述:
该项目是为政府安全部门提供基本情报分析,和vpn劫持,vpn分析
该系统使用hadoop+hbase+hive+solr的分布式底层架构,为查询效率,和算法提供平台。
前端使用springside+mysql为基础,提供数据展示平台。
责任描述:
在本项目中本人主要是作为Leader的角色统筹整个项目。
在项目中,本人主要负责整体项目架构的设计与实现。并且搭建了hadoop+hbase+hive+solr的服务器集群。并且独立完成整个项目的搭建,开发,和交付应用。
异地信息共享与协作支撑系统所属公司:
武汉闻风科技有限公司
项目描述:
该系统实现各地市实时信息共享,交流沟通,协作查询。
系统前台面向普通用户提供申请协查,数据交换,线索共享,协查审核,在线聊天以及论坛功能,后台管理系统为省厅一级管理员提供,账户添加,修改,删除,授权,自定义菜单等功能。
该系统使用的数据库是oracle,采用springside架构。
责任描述:
参与整套系统的设计,开发文档编写,前端页面设计。
根据现场需求进行流程分析与编写及参与概要设计的讨论,以便于增加在开发中对业务熟悉度。
根据所需求的业务进行开发,代码编写,实现功能。
对程序业务逻辑进行优化,使其达到更高的性能。
提供使用说明,及后期中维护的方案给于现场人员
solr通用查询服务所属公司:
武汉闻风科技有限公司
项目描述:
用于solr查询优化
采用多线程并发,使solr分片查询快出返回结果
主要功能描述:
为大数据solr查询提供接口,保证大数据查询过程中能快速返回数据。
责任描述:
参与概要设计的讨论、根据需求编写其流程
根据所需求的业务进行开发,代码编写,实现功能。
提供使用说明,及后期中维护的方案给于现场人员
该项目为公司内部使用平台,主要整合公司所有项目使用数据,做到统一化,集中化管理,为公司其他项目提供有效数据支撑 1、构建公司通用大数据平台 2、集中处理优化海量数据存储 3、提供通用接口 4、优化数据存储结构 5、使用hadoop、hbase、flume、spark、s
该项目为网安部门提供数据分析 前端卡口设备采集到数据后,经由本系统进行数据接收,清洗,入库 后台管理系统提供数据可视化,数据统计,碰撞分析,伴随分析,等功能为网安部门实施人员定位,抓捕提供有效的技术支撑 1、以hdfs、hbase、hive、impala为底层架构处理海量数