HBase框架RDMA特性开发项目

电子商务-C2C kevin2010

开发环境:Linux Idea 框架技术:HBase、Netty、RDMA 项目描述: HBase原生采用Netty实现的RPC远程调用,实现方式为传统的TCP/IP技术,对于网络传输需要CPU将数据进行copy。而RDMA可以通过具有其特性的以太网卡进行源与目标之前的可靠连接。使用RNIC的应用程序之间使用专注的QP和CQ进行通讯。不需要CPU的参与,减少上下文切换。 主要职责: 1、分析HBase底层Netty实现。梳理源码调用流程。分析相关接口。整理调用栈。 2、设计RDMA接口,梳理RDMA调用关系。适配其客户端与服务端代码。 3、编译、部署、并执行相关测试用例分析性能...

HBase框架RDMA特性开发项目
HBase框架RDMA特性开发项目

实时数据分析系统_Flink

电子商务-C2C kevin2010

开发环境:Linux、Idea 框架技术:Flume、Kafka、Flink、MySql、Scala、Canal、Redis 项目描述: 面对越来越高的实时性需求,公司决定引进Flink框架对原来有的Spark Streaming 程序进行完善。将实时部分的项目渐渐迁移到Flink来完成。由此获取 低延时,高容错性的结果。为用户提供更完美的购物体验,从而提高公司商品的销 量,增加公司利润。 主要职责: 1、负责业务数据和用户行为日志的实时采集、计算、存储。 2、负责开发实时指标:实时统计用户人数,交易总额总数。 3、负责开发实时指标:实时统计一个小时内商品TOPN详情指标...

实时数据分析系统_Flink
实时数据分析系统_Flink
------ 加载完毕 ------
联系需求方端客服