精通Python语言,熟悉Django、Flask、FastApi等Web框架
熟悉Linux操作系统及常用命令,具备良好的系统架构理解能力和维护能力
熟悉常用的数据库系统,如MySQL、Redis等,熟练使用SQL语句
熟悉使用git等代码管理工具
熟练使用docker工作进行构建部署,了解K8S部署工具
熟悉使用pandas进行数据处理分析
熟悉使用aiohttp selenium 进行数据采集
一、国网业务应用评价中心 2023年11月 -- 至今
开发环境:Python Linux Docker K8s
核心技术:FastApi、Prometheus、ClickHouse
项目背景: 本项目主要是对流量数据中的接口请求进行分类规整,把请求接口跟项目的功能进行匹配。计算各个系统的使用频率,以此来进行评比在项目上的资源投入占比
工作职责:
1、参数clickhouse数据库的设计,完成领导分配的开发任务保证接口质量
2、配合团队其它java开发成员完成功能整合
3、使用fastapi框架单独负责普罗米修斯数据源数据采集工作
4、单独完成数据定时查询、数据导入导出、数据处理、数据统计接口开发工作
5、负责项目中应用的开发,docker镜像构建 K8s部署等部分运维工作
二、山东国网建转运红蓝线指标核查项目 2023年8月 -- 至今
开发环境:Python Linux Docker
核心技术:FastApi、Prometheus、ClickHouse
项目背景: 本项目主要是国家电网阿里云华为云以及ECS虚拟机数据库,K8S,中间件等指标的检查判断,以及项目的验收报告中公章的识别验证
工作职责:
1、主要参与项目开发的框架设计
2、主要负责红蓝线检查指标的脚本与接口开发工作
3、主要负责与java Web后台接口对接工作
4、主要负责项目的前期运营代码修改部署工作
三、Dsmart 智能问诊软件、IT 健康管理中心系统 2021年11月 -- 2023年10月
开发环境:Python Linux Docker Java 数据库
核心技术:Java、Python、Redis、Orcale、Postgres 、Mysql、Neo4j、OS
项目背景:实现对数据库及操作系统的软硬件各个指标进行监控,性能分析,对软硬件故障的多级告警,对故障问题提供合理的解决办法、可使运维人员实现问题快速定位处理,可提供检测报告的一款多功能软件
工作职责:
1、负责各Oracle Mysql Postgres 数据库及OS等指标的日常检查脚本编写
2、针对需求的方向,对所有脚本进行后期的维护与修改
3、责各种数据库,操作系统,网络等指标数据模型的整理
4、负责各对象之间的关联分析,Neo4j图数据库建模,数据的存储,自动备份脚本编写
5、负责数据处理与数据、实现后期软件的自动诊断准确率
项目主要是对Excel表格的事实监控,计算输出,主要输出皮尔相关系数,协方差矩阵,因子载荷矩阵,特征值,特征向量,因子综合得分 主要使用pandas,numpy scripy(科学计算库)factor_analyzer (因子分析库) xlwings (Excel表格事实操作库
1代理池从开源的地方获取,使用python多进程,主要使用的是flask框架redis数据库,主要负责项目的开发,部署,代理池的部署 2、主要负责采集歌手的信息,歌曲的信息,歌词的信息,歌曲下载链接,以及图片的下载评论的采集,数据的存储