本人熟练使用python爬虫,Selenium自动化工具使用,django框架+vue前端+mysql数据库进行网站开发,可以将简单脚本打包成windows可执行应用,避免运行库的限制,同时了解计算机硬件、系统维护,必要时可以在linux系统+docker容器进行部署,一次打包,永久成形,避免因硬件的差异导致各种问题出现。
爬取网页数据,对加密的网页(例如电信智慧社区平台、海康威视安防综合管理平台)根据js文件进行算法重构,再进行爬取操作,或直接发送数据进行批量更改、添加数据,清洗无用数据导出到表格,将pdf的文件进行图片导出。