多年java后台一线开发,曾做过后台架构、模块设计等工作。目前在专注于金融行业大数据领域,目前负责公司大数据平台的建设。
1. 有多年J2EE开发经验,熟悉spring mvc框架, 熟悉TTD流程,包括 Junit Mockito 等单元测试技术, 并且开发过maven插件熟悉maven,git,svn等工具,有在linux上部署开发经验。
2. 开发过存储过程,并且有数据库调优经验。
3. 使用过scrapy爬虫,爬取网络数据。
4. 熟悉hadoop、hive、sqoop、hbase、kafka等大数据组件,并且了解R语言、python、scala的基本开发。
5. 熟悉敏捷开发流程,有过小组管理经验
平安慢性病费用分析
目标:根据 诊断数量、住院天数、手术数量、性别等栏位去分析患者的总费用
模块划分:
1.前台页面展示 Angular JS 和 ECharts。ECharts是对分析的数据做展示使用的。
2.业务逻辑层 使用的事平安医网的框架,主要是使用spring。在业务逻辑层中,需要接受从R语言引擎技术出的结果,处理后传给前台页面。
3.R语言计算引擎 从数据库抓取清理过的数据,然后对其进行模型拟合和计算,如标准化残差、帽子矩阵、cooks'd等。
4.数据清洗 把需要计算的数据从原始库里取出,然后对其进行归一化、哑变量等处理并存入清洗数据表。
本人主要负责业务逻辑层和R语言计算引擎的开发。
1.搭建R语言服务器
a.配置R语言连接oracle的
b.配置R语言和java的相互调用
2.编写R计算代码
3.编写java调用R代码