1.熟悉Java、Python,具有优秀的算法与数据结构基础;
2.熟系常用关系型数据库以及MongoDB、HBase、Hive等NoSql数据库;
3.熟悉hadoop、spark、ELK等大数据相关技术;
4.熟悉linux操作系统
项目简介:
农信大数据管理平台是一个为企业内部、外部、服务站以及政府等客户提供数据服务的大数据管理平台;其数据服务方式分为大数据指标、BQ平台、数据接口;平台建设思路为:
1、基本功能(展示、权限、模型、规则、调度)
2、直接数据指标抽取(实用、能做、报送)
3、自动化数据抽取平台(Kettle编制、结构化数据、非结构化数据)