ID:352435

Kempin Wei

数据平台高级开发工程师

  • 公司信息:
  • 普信恒业科技发展(北京)有限公司
  • 工作经验:
  • 12年
  • 兼职日薪:
  • 600元/8小时
  • 兼职时间:
  • 可工作日远程
  • 可工作日驻场(离职原因)
  • 所在区域:
  • 北京
  • 海淀

技术能力

精通Java核心,良好的编码能力;熟悉JVM内存管理及调优;
精通多线程、高并发编程解决方案及原理;
精通Spring、Spring MVC、MyBatis等开源框架;
精通SpringBoot原理;
熟悉SpringCloud Alibaba技术栈,熟练基于微服务设计、开发;
熟悉微服务的注册发现、分布式系统设计解决方案、负载均衡等;
熟练使用XXL-job,DolphinScheduler调度系统;
精通Mysql数据库设计及优化,熟练使用分库分表sharding-sphere;
精通Redis的原理及应用;
熟练使用ElasticSearch开发服务接口;
熟悉大数据平台相关功能设计与开发,有数据采集、计算、导出使用经验;
精通消息中间件Kafka的原理、应用及调优;
熟悉Linux常见命令、了解shell;
熟悉常用设计模式并灵活应用。

项目经验

2022/04 – 2024/07 (普信恒业--数据研发部)
1.大数据中台元数据研发
项目简介:服务于大数据中台,提供多种类型数据库(hive、kudu、spark3)的访问与维护。以业务属性分为不同的项目,支持DDL建表、图形建表、表结构修改、表清空、表删除、表分区删除。维护元数据信息、字段业务描述、表生命周期,记录表的操作记录、所属人变更、查看建表语句等信息。提供跨项目表授权、对外发布、表申请、表数据上传、引入外部数据库等。
责任描述:负责中台元数据相关功能的需求评审、方案设计、功能开发、测试、线上问题解决及后续版本迭代。
2.数据地图研发
项目简介:基于ElasticSearch,提供数据资产多维度查询。查询条件有项目、表名、表描述、字段名、字段描述、表类型、表热度(7天、30天、60天、90天、180天)、表资产目录等信息。
查询结果按表名称、表30天热度、存储大小排序。
详情信息包含:表的使用热度、表相关批量任务(按使用渠道、时间段、读写统计表热度)、表的元数据信息、分区信息、存储大小、数据量、数据更新时间、表在中台操作记录、表权限项目等信息,导出。
管理项目提供资产目录新建、修改、授权,表目录、表描述、字段描述批量修改功能。
责任描述:负责数据地图服务的架构设计、核心功能开发、测试、线上问题解决及后续版本迭代。
3.数据治理开发
项目简介:项目下数据资源概览、项目表资源情况、大任务资源占用统计展示,spark队列资源、离线作业运行情况展示,并提供数据下载。
用户相关表的健康分计算,统计内容包含:自建表使用数据、大任务资源占用、任务运行健康状态统计。
责任描述:负责数据治理需求评审、设计、开发、测试、线上问题解决及后续版本迭代。

2018/12 – 2022/03 (财富研发中心)
1.企微项目后台开发
项目简介:项目基于Bladex商用平台,运用Spring Cloud Alibaba,xxl-job等技术,对接尘峰系统,支持多租户,实现各个渠道员工、客户与企微平台实时同步。并通过企微平台下发文章、视频、推广活动等。同步新增客户、好友添加、客户标签、跟进记录以及客户赠与。
责任描述:负责企微后台关键模块开发。Nacos作为配置和服务注册发现中心,接入渠道处理数据发送至kafka,企微中台接收消息,调用接口同步到尘锋系统。定时任务由xxl-job管理。Async使用自定义线程池,使用注解KafkaListener,优化消费者消费性能。接口调用使用okhttp3。
2.宜信财富-用户销管系统研发
项目简介:为宜信财富各渠道端,提供新客户注册、实名、绑定理财顾问、上传资料、绑定银行卡、邮件短信提醒等。基于wormhole流式处理同步客户行为时间线信息。理财师APP、线下客户中心(EC)提供保存沟通记录、客户邀约陪访、活动后效果评估等。
责任描述:负责主要业务功能模块后端设计与开发。分布式锁使用Redisson,消息队列使用Kafka,分库分表使用sharding-jdbc。
3.市场活动系统
项目简介:市场活动系统,支持客户经理发起的线上线下活动。支持公司两个大型活动(尊享年会、传承峰会)。支持客户自主报名、客户经理添加报名、小程序报名。支持活动报名白名单;活动参与积分客户报名。客户扫码报名、小程序扫码签到、报名统计导出、活动效果评估。
责任描述:负责市场活动主要功能模块的需求评审、设计、开发、测试、线上问题解决及后续版本迭代
2017/03 – 2018/11 微服务管理平台,又称Boss网关(天曦科技—微服务架构部)
项目简介:
该平台提供对注册服务的API进行管控,运营平台首先创建租户,租户登录租户平台,可以注册应用及API、申请其他租户的API,经运营平台审核通过后,应用生成appKey与client_securet,API生成经过网关的访问URL。
调用平台API前,需要先应用的appKey与client_securet,调用OAuth2.0服务获取token。
之后POST方式,携带参数,请求API。
运营平台还提供路由管理、应用管理、日志监控、短信服务、邮件服务等;租户平台还提供服务调用信息查询、统计、应用日志查询等。
网关服务对租户的调用进行鉴权、限流。
责任描述:
基于SpringCloud(eureka,config,zuul,oauth2.0,ribbon,feign)开发微服务,涉及微服务有OAuth2.0、网关、运营平台、租户平台。
应用日志收集服务,使用Kafka接收日志消息,按日志日期、业务类型,进行水平分表,保存应用日志;在租户平台、运营平台提供应用日志查询功能。
发送短信服务、发送邮件服务均利用Ra

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服