ID:135536

诸葛余

高级java工程师,高级大数据工程师

  • 公司信息:
  • 科大讯飞
  • 工作经验:
  • 5年
  • 兼职日薪:
  • 800元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 所在区域:
  • 其他
  • 全区

技术能力

1、熟悉Java初级及高级知识,包括反射,动态代理等,熟悉常见的设计模式,如:适配器模式,动态代理等。
2、熟悉Python编程语言,熟悉Python的web应用Django框架。
3、熟读数据接入框架DataX源码,并根据业务需要对其进行源码改造。
4、熟悉MyBatis、SpringMVC、Spring等常见开源框架,熟悉Spring-Boot,Mybatis-Plus进行项目快速开发。
5、熟悉Hive、Spark等分布式计算框架,熟悉spark原理及应用。
6、熟悉MySQL,Oracle数据库,并且了解一定的sql优化。
7、熟悉Jvm及Tomcat调优。
8、熟悉Redis缓存数据库的使用以及Dubbo分布式服务框架。
9、熟悉使用Git、Maven等项目开发及管理工具。
10、熟悉大数据Hadoop集群,理解Hadoop框架的Hdfs和Mapreduce的设计原理。
11、熟悉常见的Linux命令,了解ActiveMq、WebService、Zookeeper等技术。

项目经验

2019年3月-2019年7月 元数据管理项目
开发环境: Eclipse+Mysql+Maven+Svn
软件环境: Spring+SpringMvc+MybatisPlus
项目描述:
实现对业务元数据,指标元数据,ETL元数据的采集和管理,同时引入数据资产的概念,通过数据资产目录管理数据资产。
责任描述:
1、项目整体的架构设计。
2、项目的数据模型设计。
3、项目数据管理模块,数据采集模块,数据资产模块功能实现。
4、项目现场部署实施应用。
2018年3月-2019年3月 数据开发平台研发
开发环境: Pycharm+Mysql+Svn
软件环境: Python+Django+Oozie+Spark+Hive+Hadoop集群(CDH)
项目描述:
实现在页面上进行ETL流程工作流创建、运行调试、工作流属性以及节点运行属性查询、调度任务运维、工作流依赖及版本管理 ,支持hive2、sparksql的开发及运行;支持sparkjar、java jar、mapreduce等jar程序的运行以及支持scala程序的在线开发;支持hdfs文档管理、权限控制以及文档的上传下载和在线预览的功能;项目包括数据开发模块、数据查询模块、数据管理模块、运维中心、运维监控模块,实现了ETL流程创建、开发、运维等一系列功能。
责任描述:
1、负责项目架构设计和前期技术调研
2、负责项目开发人员工作分配及项目开发管理
3、负责实现项目中重要的模块的开发及项目中遇到的技术难题
4、负责项目的部署实现及平台使用培训
2017年9月-2018年3月 日志分析系统
开发环境: Eclipse+Mysql+Maven+Git
软件环境: Hadoop+Azkaban+Flume+Hive+Sqoop
项目描述:
通过对多汇网商城网站的日志进行分析,计算网站关键指标,其中关键性指标有,浏览量:PV,独立IP数:从某种程度上来说,独立IP的多少,是衡量网站推广活动好坏最直接的数据。跳出率=跳出数/PV:跳出率是非常重要的访客黏性指标,它显示了访客对网站的兴趣程度:跳出率越低说明流量质量越好,访客对网站的内容越感兴趣,这些访客越可能是网站的有效用户、忠实用户。
责任描述 :
1.参与前期项目分析和架构设计,分析得出网站的关键性能指标
2. 通过写Mapreduce任务对数据进行清洗
3. 负责网站的浏览量统计,用户注册统计等模块的设计

2016年8月-2017年7月:多汇网网上商城
软件环境:SpringMVC+Spring+Mybatis+ActiveMq+Redis+FreeMarker+angularJs
开发工具:Maven+Git+Eclipse+Tomcat+Mysql
项目描述:B2B2C模式的的分布式、高并发、高可用、高可扩的电商项目。项目包括网站前台,运营商后台,加盟商后台三个子系统,包括商品管理、订单管理、客户管理、合作商管理、客服管理、支付平台、内容管理等,前台包括个人中心,购物车,商城首页,商品搜索页,商品详情页,提交订单页,支付页面等页面构成。
责任描述:
1、商品管理模块:运营商后台的商品管理的功能代码实现
2、广告管理模块:广告管理功能的代码实现,使用Spring-Data-Redis实现广告缓存管理。
3、商品搜索模块:使用Solr完成商品搜索功能
4、商品详情页:展示商品详情信息,该页面采用FreeMarker页面静态化以减轻系统压力
5、短信微服务平台开发,使用Spring-Boot开发短信微服务平台。

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服