主要负责软件设计文档编写,根据项目实际需要进行技术方案分析,选型,python/JAVA开发,python监控平台设计开发,设计开发高效python工具脚本,爬虫,网站数据采集/分析/清洗/整合,自动化流程测试(模拟人工操作),办公流程自动化开发(rpa),图片文字识别,语音识别;
智能数据分析平台
编写爬虫程序,数据清洗可视化
1/根据需要爬取的数据进行需求分析,分析目标网站的网站结构和一些反爬手段,通过requests、selenium、chromedriver、xpath等技术手段和工具编写爬虫程序,独立完成网站数据爬取;
2/对爬取到的数据,通过matplotlib生成直方图、条形图、散点图、饼图、词云等,多维度展示分析数据,并撰写数据分析报告,供需求方对数据有直观的了解
职责:python工程师
实现从CRM,CSS等多个系统中进行自动化数据采集和分析,清洗,写入数据库,同时对系统数据进行定期更新;并根据数据生成相应的数据分析报告PPT;
将客户提供的表格资料进行数据整理归档后,读取相应的数据,自动化多线程发起批量系统审批流程,执行表单切换,数据录入,附件插入,信息匹配等操作。