ID：154662
cobb
资深大数据工程师
- 公司信息：
- 搜狐
- 工作经验：
- 6年
- 兼职日薪：
- 1000元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 北京
- 海淀
技术能力
熟练掌握hadoop分布式数据数据集群，掌握hadoop集群的搭建和配置；
熟练掌握CM，以及CDH集群的搭建和配置，与调优。
熟练掌握Ambari，与HDP集群的部署和调优。
4.熟练掌握MapReduce，hdfs，Yarn等框架，以及相关开发和性能调优；
5.熟练掌握Hive、HBase，sqoop、flume、zookeeper、storm、kafka等组件；
6.熟练掌握elasticsearch、ELK等其他开源项目；
7.熟练掌握spark、sparksql、sparkStreaming以及相关源码。
8.熟悉linux操作系统，python、scala、shell、java 。
9.熟练掌握Atlias以及kerberos 等。
10.具备丰富的大数据运维和调优经验，有PB级数据集群开发运维经验。
11.熟练掌握Hadoop 和 MapReduce 集群运维、故障处理、数据倾斜、性能调优
12.熟练掌握Hbase集群运维、性能优化。
13.具备kylin、clickhouse等OLAP经验 。
14.具备丰富的数据仓库建设经验。
15.具备丰富的大数据平台建设经验。
项目经验
王府井数据平台通过收集相关电商平台的消费行为数据，进行ETL处理，并使用HBase、ES等实现各子公司/业务部门数据的存储，同时基于Hive做数据分析、报表处理。本期项目还实现了各子公司之间的ID拉通，成功建设了用户标签体系，构建了丰富的宏观画像和微观画像并且完成根据用户群进行精准营销推荐等功能。同时还包括对电商网站的各种用户活跃行为（访问行为、购物行为、广告点击行为等）进行复杂的分析。
相似人才推荐
-
500元/天高级研发顾问用友概要：windows,linux系统环境部署。熟悉系统，平台搭建。因为项目繁杂熟悉java，js ,c# -
800元/天深度学习清华概要：OCR识别：对于传统特征提取+文字识别算法可熟练使用。如果企业服务器支持可采用深度学习技术提升准确率
-
800元/天高级软件工程师某大型医疗公司概要：有良好规范的编程习惯，热衷于技术研发，善于交流沟通、具有良好的团队精神和写作能力；工作认真负责，能够
-
500元/天硬件工程师COD概要：一、控制科学与工程专业硕士、3年相关工作经验； 二、熟练掌握电路原理图设计软件，熟练PCB布局布线
-
500元/天数据挖掘工程师安天信息技术有限公司概要：1.数据挖掘，熟悉数据挖掘相关算法 2.数据爬虫，熟悉大型网站爬虫技术 3.毕业论文撰写及相关数
-
500元/天研究生大连交通大学概要：熟悉C语言、Java开发，前端学习过Dreamweaver，精通数据库（MySQL、SQLServe
-
500元/天本科生北京邮电大学通信工程大三本科生概要：精通软件语言C++/SQL 硬件语言：VHDL＆Verilog 掌握Python/MATLAB
-
500元/天爬虫架构师某互联网公司概要：掌握技能：app数据抓取，网页数据抓取，java后端开发，架构设计 开发语言：java，pytho
