1、熟悉 Scrapy、Selenium 等爬虫方式,能够独立实现数据采集、清洗与可视化;
2、熟悉 Linux 操作命令、Shell 编程,能够根据需求编写运维脚本;
3、熟悉 Oracle、MongoDB、Mysql、Sqlserver、Redis、GP 数据库,能独立完成数据库系统的部署、 调优、测试和监控;
4、有 500 台主机管理经验,能够较高效的制定主机管理方案并独立实施;
1、江西省路网平台项目;
2、自动化运维平台项目,包含配置平台、监控平台、作业平台、可持续集成平台等;
3、主数据平台数据初始化,包含数据爬取,数据清洗、数据可视化;
作品详情:统一公司系统公用数据,避免数据重复治理与不一致; 作品中角色:现数据爬取、清洗与可视化与数据库后期维护与优化;
作品详情功能:可视化公司IT资产数据; 作品角色:项目主要负责人,作品想法的提出与执行,完全自主开发;