数据中台

猿急送>上海兼职程序员>有风>

案例列表

基本信息

案例ID：223538

技术顾问：有风 - 14年经验 - 通联

联系沟通

微信扫码，建群沟通

项目名称：数据中台

所属行业：金融 - 第三方支付

->查看更多案例

案例介绍

个人职责:
业务系统：
熟悉了解公司40多个条线的业务情况，例如通联通(收付通)、收银宝、二代收单、一代网关（ETS）、二代网关、二代钱包、二代专业化、收单直联、BM、报关（海关）、预付卡·通卡、预付卡·单卡、金融·证券、金融·基金、保银通（金服宝）、云商通（通商云）、外卡（CNP）、综合跨境服务系统、四方转接平台、IPAY、统一账户·电子账户、统一账户·平台账户、数字化营销、OTMS、统一认证、统一渠道、开放平台、BOFSS、助农、报备平台、云MIS等
架构设计：
打通数据孤岛，整合公司40多个业务条线的数据：
1.从上面对数据使用者，开发贴合需求的报表或是数据服务；
2.从下推广数据规范，从源头提高数据质量；
3.从自身狠抓内功。在数据治理、数据架构、数据建模和设计、数据存储和操作、数据安全、数据质量等多个方面建设方面规范化建设数据仓库。
4.根据业务需求切换Lambda架构到流批一体架构。
大数据平台建设方面
1.使用CDH搭建通联支付的大数据平台。根据业务需求，进行技术选型，设计数据和技术架构，完成软件安装、参数配置、资源池分配、权限管理、网络梳理等。
2.数据入口，搭建数据跑批平台，使用Java作为开发语言，开发数据处理服务，数据计算服务、数据加解密服务、数据跑批服务、任务流程调度服务等相关服务，在6小时完成TB级数据提取、清洗、转换，实现统一建模，记录数据血源，加入数据治理。
3.数据出口，搭建数据访问平台，主要包括数据网关，查询平台，报表平台，BI。
成绩：
1.公司在2023届全国数商大赛获得二等奖。
2.为公司运营提供数据支撑。