ID:354562

见风

大数据工程师

  • 公司信息:
  • 德勤
  • 工作经验:
  • 11年
  • 兼职日薪:
  • 1000元/8小时
  • 兼职时间:
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 重庆
  • 全区

技术能力

精通多线程、socket,扎实的java基本功。
熟悉python。
精通spark开发及各种性能调优。
熟悉AWS组件如glue、athena、redshift、lambda等
熟悉airflow、海豚。
熟悉flink,hadoop,hbase,hive,hue,zookeeper,storm,kafka,flume。
熟悉数仓开发ETL。
熟悉netty/nio。
熟悉常用的设计模式并能写出优雅的代码。
熟练使用Linux基本命令及shell脚本编程。
熟悉存储过程、触发器、作业等pl/sql编程。
熟悉oracle、mysql、tomcat、redis。
熟练使用ssh2、spring MVC、MyBatis等框架。
熟悉Web Service、httpClient、protocol buffer等远程接口调用技术。
熟练使用Ajax、jQuery、easyui等前端技术。

项目经验

乐山福华福智项目
项目描述:福华化工厂sap项目里的数仓项目。基于aws及海豚,开发涉及财务、生产、采购、销售、HSE等业务的报表。
开发语言及技术:aws/海豚。
主要职责:ETL,负责财务模块数仓建模和sql代码、HSE数据开发。
阿迪达斯数仓项目
项目描述:基于AWS云平台,并为客户建立了一个数据中心平台,该平台汇集了公司的所有数据源,并与上下游系统连接。基于pyspark并使用airflow及aws组件如glue、athena、redshift、lambda等进行ETL开发和实施。
开发语言及技术:aws/海豚。
主要职责:ETL,负责财务模块数仓建模和sql代码、HSE数据开发。
华为大数据流计算平台
项目描述:平台以flink为基础,图形化构建算子,把kafka/mysql/oracle等数据源经过union/join/filter/map/自定义处理等方式处理完成后,输出到db/mq/hdfs等相关存储。
开发语言及技术:hadoop/flink/kafka/activemq/mysql/oracle等。
主要职责:负责flink算子的开发。
南京市政务中心视频监控
项目描述:参与开发与维护。保障南京市亚青会与青奥会期间视频监控平台的运行。
开发语言及技术:与c的socket通信、百度地图、webservice,存储过程、shell脚本、easyui、ztree、ssh2等等。
主要职责:负责web端看视频、录像、录像计划、录像回看、大屏上墙、云台控制、日报统计、gis地图的功能实现,负责与c程序通信,负责与第三方平台(全球眼平台、320交管、宽慧海康平台等等)的接口对接,负责1831平台到我们的视频平台的单点登录,负责接收传感器设备数据,负责高点监控等接口对接。
负责web端系统重构。

案例展示

  • 福华福智项目

    福华福智项目

    福华化工厂sap项目里的数仓项目。 基于aws及海豚,开发涉及财务、生产、采购、销售、HSE等业务的报表。 负责财务模块数仓建模和sql代码、HSE数据开发。

  • 阿迪达斯数仓项目

    阿迪达斯数仓项目

    基于AWS云平台,并为客户建立了一个数据中心平台,该平台汇集了公司的所有数据源,并与上下游系统连接。作为开发人员,与业务部门确认开发需求,设计和完善开发设计文档、数仓模型,基于pyspark并使用airflow及aws组件如glue、athena、redshift、lambda等

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服