基本信息

案例ID:132985

技术顾问:在细雨中呼喊 - 5年经验 - 太极计算机股份有限公司

联系沟通

微信扫码,建群沟通

项目名称:DBE产品的开发与维护

所属行业:企业服务 - 数据服务

->查看更多案例

案例介绍

开发工具:IDEA + SVN+ Maven
开发技术:hadoop+hbase+kafka+flume+redis+spark+Python+Shell+Java+Scala+……
该款产品属于安防行业交付件,数据量较大,性能规格要求高,所以使用的多款组件,数据接入方面,利用Thrift的RPC远程跨语言的优势搭载kafka缓存功能,实现数据大规模入库,数据消费方面,利用flume高可用,高可靠的分布式的海量日志采集、聚合和传输的系统,实现数据的消费,数据落盘方面,以hadoop和hdfs文件为基准,使用分布式面向列的HBASE作为数据库+ElasticSearch分词检索系统便于数据的秒级检索,使用spark的parquet文件+ElasticSearch对海量数据进行分析,将分析结果存入postgreSQL,为了便于第三方调取使用,使用Jetty+Nginx反向代理的方式实现负载均衡,为了便于资源统一调度和管理,使用restful风格的设计模式方式,以便第三方的调取使用,该产品使用shell脚本和Python实现了产品的升级和维护 该系统包含如下模块:基本组件模块/研判业务/布控业务/流量统计业务/视图库业务/积分业务/HA等

相似案例推荐

其他人才的相似案例推荐

  • 学生成绩系统开发

    学生成绩系统开发

    所开发的学生成绩查询具有查询学生成绩、个人信息、授课教师等功

  • 语图

    语图

    在线心里评估咨询系统, 语图“OPA系统”已经应用于一百三十

  • 表单设计器

    表单设计器

    可视化配置页面 支持pc 移动 提供公共控件 根据公共控

  • 企业级消息总线

    企业级消息总线

    解决各信息孤岛间通信,基于rabbitmq部署消息总线。

  • 奥思网店管理平台

    奥思网店管理平台

    用于网店管理数据,技术栈,springboot thymel

  • E电小子

    E电小子

    1、电力行业物联网数据采集、分析,增值服务 2、提供中小企

  • 线下收银系统

    线下收银系统

    POS系统是一个基于线下门店的场景,集销售收银、订单管理、库

  • POS 门店系统

    POS 门店系统

    PHP版本的POS系统,功能模块主要包括门店销售、支付收银、

  • 浅深后台管理系统

    浅深后台管理系统

    酒店和会所的后台管理系统,b端产品需要对数据和信息有清楚明了

  • 数据平台

    数据平台

    大数据etl工具主要包括数据地图,数据查询,元数据管理,任务

  • 1号车间

    1号车间

    1号车间为中小型汽车维修厂提供saas软件,精细化运营,此程

  • 高新区政策匹配网站

    高新区政策匹配网站

    这个项目中我主要负责后台开发,主要包含功能就是政策匹配,企业

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服