ID：196017
doooòooob
大数据开发工程师
- 公司信息：
- 咪咕
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 南京
- 全区
技术能力
hadoop框架
sparkstreaming，sparksql
mongodb，mysql，redis,es，hive
springcloud微服务,springboot
drools规则引擎
flume，kafka
项目经验
通过flume采集服务端业务日志，将消息写入中间件kafka。通过新的flume服务将日志数据写入hive数据库，hive按天分区方便查询。同时spark treaming 实时消费kafka消息，实时统计分析数据。
实时统计任务根据经验模型，分析窗口时间内的业务日志，发现异常操作，并分析得到异常用户，异常设备，异常ip。将分析的结果存入redis以及es。
相似人才推荐
-
600元/天全栈开发工程师北京鹏搏网络科技有限公司概要：◎ 精通PHP、JAVA、Python、Node等后端常用语言及框架（ThinkPHP3.2、Spr
-
500元/天软件工程师上海科越信息技术有限公司概要：后端 java : jsp,servelet, html,js,ajax,jdbc， SqlSe
-
1000元/天技术专家阿里巴巴概要： 编程语言 擅长JAVA，会使用 Python，c++，scala等 工程能力 1.熟悉
-
500元/天高级软件工程师美联国际教育概要：后端： c# mvc aspnetcore rabbitmq sqlserver 等数
-
1000元/天技术总监西安合软软件技术有限公司概要：c#，html，JavaScript，c/c++ qt/mfc/soui mysql/ms
-
600元/天ERP开发顾问金蝶软件概要：本人有三年ERP行业的经验，对薪酬，财务，人力系统流程熟悉，有着独立开发整个项目的经验，代码习惯良好
-
500元/天推荐算法工程师爱藏网电子商务有限公司概要：大数据相关方面： 熟悉推荐领域的机器学习和自然语言处理相关算法 熟悉 Hadoop、Hive、S
-
500元/天爬虫工程师北京保代宝科技有限公司概要：熟悉Python语言，有一定的代码阅读和脚本编写能力； 熟悉unittest、pytest单元测试
