熟悉Hadoop MapReduce、HDFS、solr、flume
熟悉Kafka、RocketMQ消息队列
熟悉NIO,Netty
熟悉Redis
熟悉SpringMVC、Mybatis
熟悉Linux基本操作
有高可用、高并发项目经验。
有大数据项目经验。
1、运营指标分析监控系统
使用flume采集项目日志并录入到HDFS,编写Hadoop MapReduce读取HDFS的日志并将计算结果存入solr,开发WEB系统读取solr数据并生成图表展示。
2、连麦逻辑服务器
主要功能:网宿直播平台-连麦组件的中控平台。分为连接和业务两个组件,连接组件使用netty接受连麦请求,通过RocketMQ跟业务组件通信,业务组件使用redis做数据的存储。