ID:339459

诚诚

高级数据开发工程师

  • 公司信息:
  • 英威诺
  • 工作经验:
  • 10年
  • 兼职日薪:
  • 1200元/8小时
  • 兼职时间:
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 广州
  • 天河

技术能力

1、熟悉数据仓库建设的相关理论与方法,维度建模、范式建模、数仓分层等
2、熟悉HiveSql、SparkSql、Mysql、Impala 等平台的使用与SQL调优
3、熟悉主流大数据平台dataworks、dataphin、袋鼠云等以及开源组件的使用与开发
4、熟悉使用Springboot及相关组件进行Java Web项目的架构开发与部署
5、python 及linux shell脚本进行服务器相关任务功能的开发

项目经验

1. 时代地产
a. 数据中台 旧数仓迁移
把旧的shell hive 脚本迁移到新的可视化平台上,并改成spark sql 任务并优化。 升级后大幅优化了执行时间,并且错误任务可以及时报警处理,也更容易排错重跑, 解决了用户旧平台数据依赖混乱,任务出错难以发现排查等痛点
b. 房产质量相关业务重新梳理、建模、开发
c. 数据质量监控及自动排查错误任务重跑服务的开发 d.CDP客户中心平台数据标签体系开发,建立oneid解决集团内多个平台用户数据无法打通公用的痛点

2.唯品会数据平台
a.参与公司数据平台的建设与开发,通过维度建模、数据分层等方法理论设计dws ads层模型 并完成开发,与其他业务需求方统一公司对外数据口径,避免数据不一致给公司带来不利的 影响
b. 利用元数据系统、DQC、数据对比工具等数据治理手段及方法保证数据规范和质量 3. 任务优化,包括数据倾斜、小文件过多、执行时间过⻓等

案例展示

  • 原点参数

    原点参数

    每个国家采用的会计准则不同,导致分析师们不能直接对跨市场的同行企业,进行财务数据对比与分析。   “原点参数”将不同国家上市企业的财务数据,按同一会计准则完成标准化,实现了跨国、同行企业财务科目与指标的可对比、可排序。您可以按国家、行业、年份、财务科目和财务指标,5个维度查询全

  • 掌酷设计师平台

    掌酷设计师平台

    设计师平台是为广大设计师设计多种风格主题的背景锁屏图片,各大厂商可以对接这些丰富的图片资源,普通用户也可以下载我们的产品去下载喜欢的背景和锁屏图片。主要负责开发设计师使用的后台管理平台、业务方使用的资源平台等。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服