ID:389462

搁浅

算法工程师

  • 公司信息:
  • 杭州中奥科技有限公司
  • 工作经验:
  • 6年
  • 兼职日薪:
  • 600元/8小时
  • 兼职时间:
  • 下班后
  • 所在区域:
  • 合肥
  • 全区

技术能力

1.熟悉的Java Python 代码开发
2.熟悉Linux 操作系统环境
3.熟悉MySQL、Oracle 数据库
4.熟悉hiveSQL开发,熟悉在hiveSQL开发的调优和问题排查
5.熟悉DataX、FlinkCDC等ETL工具。
6.熟悉阿里大数据平台dataworks 获得阿里云大数据ACP 证书
7.熟悉Hadoop 整个框架的组件,掌握Hadoop 集群的搭建hdfs 读写机制 yarn 的工作原理等
8.熟悉 zookeeper 选举机制
9.熟悉Kafka 消息队列以及组件对接
10.熟悉 spark, 理解 spark 工作机制、RDD 的任务划分及操作,熟悉 sparkStreaming 流式计
算。
11.项目数据流程开发文档输出,初级数据工程师的带教,有一定小团队的带队经验。
软件工程专业 目前已工作六年 开发过程做过组长、后升职项目经理 目前仍在开发一线

项目经验

拱墅经济管理平台:
1、IRS云上数据,excel,接口数据,爬虫数据等数据源的数据对接工作,主要是与第三方公司以及客户对接数据,并将获取到的数据通过ETL工具同步到MySQL
2、对各类数据按照业务逻辑进行开发,可复用数据的抽取成表
3、异源数据通过DataX同步MySQL数据库后,按照数据更新情况增量或全量通过数据集成抽取到dataworks建立ods层。
4、数据格式统一化标准建立,清洗完成落到dwd层。
5、按照业务需求通过dataworks平台各类数据完成HiveSQL开发,轻高度的sql开发完成DWS层的数据汇总,各类数据关联维度形成宽表。
6、根据大屏指标的业务需求完成指标计算的SQL开发落地ADS层。
7、各项调度任务运维工作
8、项目开发过程安排初级工程师的任务分配、对初级工程师完成的SQL调优以及不足技能点的带教工作。
微信机器人开发:
开发自动回复微信机器人并多地部署

案例展示

  • 微信机器人

    微信机器人

    微信机器人自动回复 可以根据发送人特定关键词自动回复 可以根据发送的内容的不同、发送给对应的对象 可以根据关键词通过大模型智能回复

  • 第二个不想写是我实际工作的页面上传会泄密

    第二个不想写是我实际工作的页面上传会泄密

    第二个不想写是我实际工作的页面上传会泄密 第一个是自己平时做的东西 平台还会做一些数据爬虫 没有平台页面 老项目的平台因为离职已经无法截图 现在做的项目是公司项目 不想发到这上面来

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服