基金清算系统
软件环境:SpringMVC、Spring、jdbctemplate, Hbase,HDFS,Hive,Impala,Linux
开发工具:My Eclipse
责任描述:系统的流程设计、表结构设计以及核心代码的编写。
项目描述:使用spark、hive、impala进行数据的导入、预处理、清算、周边文件导出等功能。 其中也涉及系统优化方面的功能,如spark性能优化、solr同步hbase精度丢失问题等。
个人感想:大数据的便利和高效离不开代码优化、逻辑设计、容器优配。