1.excel前端函数、制图做表、数据透视以及Excel后端vba编程(如何发一个界面或者一个系统)
2.python
3.tableau和power bi(前端界面和后端代码均较熟练)
4.mysql数据库、mongodb数据库
5.hive数据库、hadoop
一、excel和vba
1.使用excel前端函数与后端vba相结合,自行研究开发一套带有界面的自动化统计分析的系统。用户通过账号密码登录,不同区域的用户只能看到各自区域的数据,如需扩充数据权限范围,也可通过系统管理员添加。
2.根据固化的日常工作和一定的逻辑,开发一键式自动导入、计算、导出的功能,省去人工手动计算的时间。
二、tableau和power bi
1.为项目组制定指标作为考核标准,并根据指标的走势进行定期的修改和添加新的指标。
2.依据定好的指标,设计用来进行多维度分析的报表demo。
3.依据建好的报表demo进行数据建模(数据清洗、数据预处理、数据发现、多表关联、数据验证)
4.依据建好的数据模型,提取数据。使用Tableau和Power Bi进行数据可视化或数据报表等分析。并可以监测异常值。也可以把做好的可视化发布到网站,让其他人可见,并可以很好的理解问题。
5.依据上边分析的结果,制作报告,将问题公布,并提供有利的改善方法。
三、数据库和数仓搭建
1.负责浏览器数据的数仓搭建(数仓分层:ODS>DWD>DWS>ADS)。
2.负责数据字典的构建和编写。
3.开发报表及可视化图形。如:留存图、漏斗图、线形图等。
4.调整重构代码或者修改hive的参数对hive进行性能调优。
5.写定时任务脚本,每天定时自动调度脚本。且监测脚本调度是否正常,并自动将调度异常的脚本发邮件通知相应的脚本负责人。
6.利用hql的炸裂函数、正则函数、map函数及其他函数进行解析字段。将复杂不可直接使用的数据按照一定规则解析成具有统计和分析意义的字段。
作品数据是公司提供的,规则和逻辑是我与项目组负责人共同商议决定的,整个作品的开发是我独自一人完成的。 主要是用Excel和后端vba开发出来的一套自动化计算的模板。
我是作品开发的责任人,主要利用现有的数据,通过tableau和power bi开发数据可视化图形,将数据图形化展示,从数据中获得的信息通过图表展示,一目了然