ID:353079

赌神L_a_n_g

数据中台

  • 公司信息:
  • 中银富登村镇银行
  • 工作经验:
  • 9年
  • 兼职日薪:
  • 1000元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 可工作日驻场(离职原因)
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 北京
  • 丰台

技术能力

熟练 Hive、MySQL等 SQL和 starrocks 数据库及大数据 Hadoop 相关生态圈产品;熟练 SQL/HQL、Shell、Java 等分析编程
语言,熟练使用PL/SQL、navicat 工具,使用过 Azkaban、Linux 计划任务、Oozie 、DolphinScheduler 、Informatica 等调
度工具和 Tableau 、永洪 BI 等可视化工具。熟悉腾讯云大数据平台、联想大数据平台、阿里对象存储。熟悉新零售业务(伊
利)、银行业务(中国银行),了解陕西重汽、中国重汽的项目。工作中有较强执行力和管理能力,注重团队协作、工 作效率和
工作成果。有一定的授课能力,带过大数据相关课

项目经验

该项目是中国银行下属银行中银富登村镇银行的数据中台项目,该项目涉及近百个相关系统如:cbs核心系统、cms信贷系统、crm人力系统等,数据中台主要通过Informatica和shell脚本以及存储过程对上游各系统进行数据抽取,涉及oracle、mysql、数据文件等。将数据抽取数据中台后,对数据进行建模、改造、调度配置等操作,为下游指标系统提供相关数据。
1、与行方领导沟通项目进度及工作及新项目的风险评估、人员协调、项目周期等工作
2、跟进组内成员的工作进度及工作安排
3、根据下游各指标系统需求,根据现有中台模型进行开发,按照上游系统类型进行数据建模
4、根据需求进行老中台模型改造,包括逻辑变更,模型结构修改等
5、模型优化,根据中台需求对目前中台模型的调度时间长、存储执行时间等问题进行优化
6、模型追批根据各指标系统需求需要追开行历史数据涉及流水表、拉链表等
7、接表接数,指标系统使用数据不存在时需要中台从上游新接系统接表接字段接数据操作
8、脚本开发,根据需求开发具体shell脚本
9、informatica调度工具相关操作,如调度变更依赖变更
10、熟练MySQL、oracle、PLsql
11、参与部分数据治理工作,建立血缘关系,统一计算规则,业务指标统一定义等
12、智能风险指标分析根据业务部门提供需求完成指标分析
13、对新老报表更新
14、编写相关投产文档,测试文档

伊利集团数据中心的目前涉及到伊利集团数据湖的本公司的项目,包括各个工厂的一线生产数据,以及各大电商平台的销售数据,数据湖中心项目主要从各个工厂中抽取生产数据,新零售电商销售的数据进行分析处理。
工作内容:
1、通过DolphinScheduler 调度平台将手工表和系统表导入从源库入湖上云离线
2、给客户开通DolphinScheduler 调度平台权限
3、授权腾讯云大数据平台资源及hue授权
4、Etl 数据抽取
(1)excel 到腾讯云大数据平台数据抽取
(2)ftp数据抽取到腾讯云大数据平台数据抽取
(3)阿里云对象存储平台到腾讯云大数据平台数据抽取
(4)腾讯云大数据平台到阿里云对象存储平台数据抽取
5、Etl 数据抽取shell 脚本开发
6、Oee工厂数据抽取,从各个工厂源库抽取数据到腾讯云大数据平台,每十五分钟抽取一次微批处理准实时
7、在腾讯云大数据平台将数据进行清晰后合并成数据宽表,输出到mysql 数据库
8、Mysql 中对数据宽表进行指定指标开发,链接永洪bi 工具制作对应报告,如指标数据查询、未达标指标数据查询等报表开发
工作大数据
讲师
2018.05-2020.06
内容:
1、大数据项目是北大青鸟的主要业务之一,目前面向群体,主要以大学生,社招为主。
2、在校学生约为300-450人左右
3、团队配置:讲师团队在8-10人左右,班主任4-6人
业绩:
1、平均每个班的升学可以达到95%,每个班的业绩80万左右
2、教学期间没有出现新生主动退费问题
3、学生就业由教学部和就业部共同完成,就业率在95%左右大数据
讲师
2015.04-2018.05
内容:
现公司主做it行业的培训,培训内容以大数据为主,培养大数据人才,为社会输送新鲜血液
团队规模在11人左右包含讲师、班主任、以及助教主要面向社会招生和校企合作,以校企合作为主,佳木斯大学、绥化学院、大庆学院、天津职业技术师范大学等院校合作
业绩:
1、口碑业绩一个月在15万左右
2、就业率95%左右
3、预科学员0退费
4、院校合作转化率50%

案例展示

  • 数据中台

    数据中台

    内容: 1、与行方领导沟通项目进度及工作及新项目的风险评估、人员协调、项目周期等工作 2、跟进组内成员的工作进度及工作安排 3、根据下游各指标系统需求,根据现有中台模型进行开发,按照上游系统类型进行数据建模 4、根据需求进行老中台模型改造,包括逻辑变更,模型结构修改等

  • 数据湖

    数据湖

    内容: 北汽新能源数据迁移项目本项目为大数据基础平台优化升级,其核心是将现有LeapHD 系统版本升级到R412后,必须保证旧版本下所有业务在新版本下正常运行。为了降低在迁移工作中的技术风险,需要在新、旧环境下做POC 技术验证,包括数据库建表(如何批量获得建表的DDL 语句)

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服