项目名称:数据运营管理系统 项目时间:2019.10-2020.3 项目职位:数据组组长
项目描述:数据运营管理系统是一个数据集成工程,需要整合各个业务部门的数据,因此会涉及到多种数据库和不同格式的数据信息,以数据为核心,要实现数据目录中心和各部门端之间的数据共享和交换,同时完成数据采集、清洗、比对、加工、校验、应用等全周期质量管理。
工作职责:1、独立完成数据运营系统的自监控模块的业务规划,并已交付在开发;
2、人员消费画像功能模块的开发,通过采集动态实时的数据和已有的静态数据,对套餐消费人群进行构建用户标签。
3、参与数据运营系统的数据稽核模块的设计方案,并独立开发数据稽核的脚本;
4、参与数据血缘模型的方案设计及业务逻辑,部署数据实时流传输采用的工具kafka;
5、部署hadoop,hive测试环境。