数据库:熟练掌握 MySQL、PostgreSQL、Oracle、Redis、polarDB、Kingbase 、达梦等数据库的操作与使用,
并能对其进行简单的调优
中间件:掌握常见的中间件,例如:Tomcat、Nginx、Nacos 、东方通等
容器:熟练掌握 Docker 的使用,熟悉 kubernetes 的操作
编程语言:熟悉 java、python、shell 编程语言
这是一个基于 Python 的信息爬取项目,旨在从xxx采购网上获取相关信息。这个项目是为了满足用户对xx采购信息的需求而开发的。
具体而言,我通过分析网站的页面结构和数据来源,设计了合适的爬虫程序。我使用了 Python 中的相关库和框架,如 Requests、BeautifulSoup等,来发送网络请求、解析网页内容,并提取所需的信息。同时,为了确保高效和稳定性,我还添加了一些反爬机制,如设置请求头、使用代理 IP等。
在界面上,采用 PyQt 5界面框架,实现与用户的交互,在程序实现过程中,我考虑到了数据量大、页面变化频繁等问题,采用了多线程(threading )或异步处理的方式,以提高爬取效率和稳定性。
1、与客户对接需求,收集客户需要爬取的信息
2、 对交互界面进行简单的设计,满足客户的需求
3、 对爬取的数据进行处理,存储到本地
这是一个基于 Python 的信息爬取项目,旨在从xxx采购网上获取相关信息。这个项目是为了满足用户对xx采购信息的需求而开发的。 具体而言,我通过分析网站的页面结构和数据来源,设计了合适的爬虫程序。我使用了 Python 中的相关库和框架,如 Requests、Beaut
维护企业官网,申请域名、域名映射、备案、程序部署、SSL证书挂在,Nginx代理等。后期DDNS高防维护。