案例介绍
该项目是由该公司致力于解决全国电信欺诈问题的项目，以前是使用存储过程加公司自研发的系统进行大数据分析，现在改用大数据平台进行分析，每一个小数一个省的数据量大概有一亿条，高峰时期每小时2-3亿，一天处理的数据量在25亿左右，使用公司自营服务器16台，每台内存256G，容量TB级。该系统就是从大量数据中对号码进行指标分析，筛选出有诈骗嫌疑的号码加入集团黑名单中。\
1.首先大数据端从HDFS端取得文本数据，使用Scala语言对数据进行处理后输出到Mysql/Impala,使用架构为Hadoop+Hive+Impala+Spark+Scala+Hue+Oozie+Flink
2.Java后端通过XML配置动态生成SQL语言，对大数据处理后的结果进行查询。主要架构为SpringMVC+Spring+SpringBoot+Mysql+Vue
案例图片
相似案例推荐
其他人才的相似案例推荐
-
创新创业创造服务平台
本系统是为广大创客打造的全方位创业服务平台，该平台整合政策、
-
tomcat源码分析
1. 导入到eclipse 2. 检查Problems问题
-
单点登录
1 提供用户登录，登出，注册，同步数据等接口 2.支
-
api-gateway
1. 支持自定义路由-redis读取路由
-
数据看板
数据看板是数据可视化大屏设计工具，通过数据源配置管理，数据集
-
堃方MOM系统
堃方MOM系统是一个制造运营平台，主要包括的功能为 销售模块
-
智能测试库平台
功能：主要用于公司内部数据处理智能测试，包含数据智能分析，数
-
达人记数据采集系统
数据采集是批处理文件的延伸，是一种纯文bai本保存的程序du
-
达人记数据采集系统
数据采集是批处理文件的延伸，是一种纯文本保存的程序，一般来说
-
达人记数据采集系统
数据采集是批处理文件的延伸，是一种纯文本保存的程序，一般来说
-
达人记数据采集系统
数据采集是批处理文件的延伸，是一种纯文本保存的程序，一般来说
-
中国铁建移动平台
这个项目是中国铁建移动平台，用于企业人员方便的管理、查看数据
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
