▫ETL开发|数据清洗|实时流处理
▫数仓搭建|报表自动化|性能优化
▫ Flink实时看板|Hive离线分析
▫ park数据分析 scala编程 spark编程 大数据分析技术 数据分析可视化 spark sql spark dataframe spark rdd spark streaming Hadoop MapReduce
重庆高速科创大楼数字孪生
为落实“数字中国”、“数字重庆”、“数字交通”的战略部署要求,并结合集团《加快推进“数字高速”建设的行动方案(2023-2027)》建设要求,进一步全面深化集团“数字高速” 建设,推动数字化与企业发展深度融合,以数字化促进集团治理体系和治理能力现代化。高速集团围绕“智能感知、一体协同、多跨融合、整体智治”的总体目标,建设“重庆高速智能运行中心平台”,打造集团“数字高速”建设的集中展示门户,充分展现“数字高速”的建设成果以及集团整体智治水平
1、使用FLink进行实时数据的计算分析
2、用flimkCDC进行数据采集
3、用hive、Doris进行数据存储