ID：198431
张全飞-Jasper
大数据高级开发工程师
- 公司信息：
- 去哪儿网/深信服
- 工作经验：
- 3年
- 兼职日薪：
- 1000元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 深圳
- 福田
技术能力
掌握的技术包括如下四大类：
1.Hadoop、Hbase、Storm、Phoenix、Kafka、Spark、Flink 等大数据相关技术；
2.Spring、Springmvc、SpringBoot、Mybatis 等应用开发相关的技术框架；
3.Docker、kubernetes、ambari（HDP）、CDH等大数据平台搭建相关的技术；
4.Kmean、Knn、SVM 支持向量机、决策树、神经网络等机器学习相关的算法。
项目经验
《数据湖治理》
将 HBase、Hive、HDFS 等组件的有效元数据实时同步到该平台中并进行集中式管理。主要功能包括：数据的血缘关系、数据的预览、数据检索、数据目录等，并且整合 ranger 到这个平台下面，进行对元数据的安全管理。此外开发出针对这个项目的批量创建数据目录和打标签工具。
《数据监听》
监控业务数据库所有数据的变化，将变化的数据推送给消息总线，避免轮询数据库造成的数据库压力。主要功能包括：抓取并解析 binlog，用户订阅，消息推送，负载均衡（topic 分区，机器均衡启动数据源），高可用（某台机器节点宕机，其他节点会启动这个节点上面的数据源等任务）
《大数据平台搭建与开发》
使用到的主要技术是 ambari。 主要做了 ambari 的搭建与开发，自定义 ambari 服务：将其他服务整合到 ambari 里面，通过ambari 进行集中式的监控和管理。
相似人才推荐
-
500元/天全栈开发广陆混凝土制品有限公司概要：1、熟悉java语言 2、熟悉SQL语言，能熟练使用Mysql 关系型数据库 3、熟知java面
-
600元/天软件开发工程师衣玮网络科技有限公司概要：本人从事软件研发3年工作经验。 1.熟练掌握C+和Python等编程语言。 2.具有1年的pyt
-
500元/天学生中科院研究所概要：熟练掌握Python,C,C++,JAVA等编程语言，熟悉html、vue、elastic sear -
500元/天网站公众号运营，大客户经理山东电信股份有限公司泰安分公司概要：大学学习的专业是物联网，编程c语言，java，数据库等。从事过公众号运营和网站开发一类的工作，精通公
-
500元/天资深客户端开发zenjoy概要：cocos2d-x游戏引擎,C++，lua, js,coffeescript, 熟练使用xcode,
-
500元/天无无概要：python爬虫和网站前后端项目 精通scrapy爬虫框架，对大型网站进行爬虫，包含完整的前后
-
600元/天自然语言处理工程师苹果树概要：掌握编程语言python。 掌握数据库开发，使用mysql数据。 从事自然语言处理和数据分析6年 -
500元/天学生没有概要：暂时没有，认真学习中，是一名本科大一学生，年轻就是资本，正在努力往这方面发展，进来学习东西，看一下市
