为了规范数据分析管理,加强数据安全管控,提升数据应用价值,为 全行数据分析工作赋能,总行计划建
设兴业银行数据分析实验室项目,对外宣称“图灵阁”。项目模块包含系统管理(用户、角色、项目组、标签管理...)、
数据集成(一次性文件加载、脱敏自动识别、数据目录导航...)、系统监控、数据探索等模块。
项目职责:
1、参与需求分析,根据产品经理需求进行项目评估与排期
2、功能开发,与测试部门人员配合测试,交于运维部署上线
3、开发数据集成模块一次性文件加载(文件上传、下载、文件同步HIVE、文件上传HDFS、数据逾期删除HIVE、Range
权限控制)及脱敏自动识别(UDF函数、Atlas标签)、数据目录导航同步HIVE数据