本人毕业于2016年,长期从事软件实施,ETL开发,BI开发的工作。
擅长的数据库:MySql,SQLServer,Oracle,POSTGRESQL
擅长的ETL工具:KETTLE,SSIS
擅长的语言:Java、Python、SQL
有项目经验的大数据组件:HIVE HADOOP SQOOP 等等
本人有较强的业务理解能力及团队沟通能力,乐于去学习和了解主流的技术,有一颗学徒的心,对待工作兢兢业业
白银区域**信息平台项目:
抽取各个机构的数据至平台,并编写SQL进一步提取数据至落地表用于数据分析,使用的工具是Kettle,调优实现了并发、批次入参、全量重抽等等
改作业实现了通过命令行调用任务脚本,入参表名抽取数据至指定数据库的功能,未添加批次入参、日志记录的功能。
该作品展示了通过配置文件生成表注释文件,然后通过执行表注释内的SQL文件追加表注释的功能,方便了数据清洗过程中频繁改动数据落地表结构还需要进入数据库中修改注释的繁琐操作