技术能力包括:
1. 基于SQL Server平台的OLAP数据分析平台,包括SSIS(ETL),SSMS(DB),SSAS(Cube)的开发
2. 基于Hadoop平台的离线数据分析系统,主要使用HIVE
3. 现在的工作是在GCP平台,使用GCS和BigQuery设计和搭建从Data Lake -> Data Warehouse -> Data Marts的数据架构和ETL流程,ETL工具使用AirFlow
房车BI项目的设计与实现。对于房车订单、运营、公众号信息,通过Binlog backup recovery,Oracle Golden Gate 同步,API调用等方法实现数据收集,在HIVE中进行数据处理,输出到BI展现层。其中包括离线数据仓库中分层和表的设计
某服装品牌生产预测Data Mart的设计与实现。设计Data Mart ERD和数据流,通过AirFlow实现主数据抽取及更新,事实数据的抽取和处理