导入模块:导入了用于发送 HTTP 请求的requests库、操作 MySQL 数据库的pymysql库、解析配置文件的configparser库以及用于解析 HTML 文档的lxml库中的etree模块。 循环发起请求并处理数据(核心逻辑部分): 首先通过循环构造不同页面的 URL(利用start参数实现分页,每页展示 25 条数据),然后使用requests库发送 GET 请求获取页面内容。 将获取到的 HTML 内容利用lxml的etree.HTML方法转化为树形结构,方便后续使用 XPath 语法进行数据提取。 先通过//div[@class="info"]...
智慧管控平台(平台 web 端 + 移动端小程序)为了实现企业 信息化建设、提高企业各部门协调办公效率、提高信息透明度、增强对企业各部门业务监管能力而开发 的协同服务平台。业务功能分为: 首页门户、智慧办公、智慧人事、智慧财务、知识库。 用户通过智慧管控平台可进行浏览、首页新闻公告发布、督办管理、公文管理、绩效管理、薪酬管理、菜单管理、部门组 织、流程、表单、数据大屏等进行快捷配置开发,后台技术架构分为: 业务前台、业务中台、文档台、 报表中台、数据中台、数据大屏。 项目核心技术 :Springcloud、nacos、oauth2 、kafka 、ES 、redis、Minio、skywa...
该项目是为了解决以往厂区内数据无法核算、数据实施完整度不足、传输混乱数据可用性差、工控安全隐患突出等问题;将采集到的数据都在平台上保存,以实现数据资产化的目的。物联网平台作为中心平台,提供了全部物联网系统的连接和调度能力。物联网平台提供物联网的接入能力,普通应用不再需要进行此功能开发,直接接入平台即可。物联网平台具备物联网高并发数据的接收、数据质量提升管理、大数据保存和转发的能力。物联网平台作为企业物联网的中心平台,实现一切数采系统的连接和调度。 该项目第一版采用 modbusRTU 协议,对接入的设备进行数据采集,并采用了 influxDB 时序数据库来治理,前后端均采用微服务的形式。...
开发环境:idea,jdk1.8,mysql 框架及技术:springboot,mybatis,redis,nginx,swagger,kafka,elasticjob,nacos,elasticsearch 项目描述: ● 协作中心是系统中负责 Linux 命令执行和监听结果判断处理的功能模块,目的是为了方便客户结合协作中心进行 Linux 命令处理。 ● 主要功能有工具包分配,扰动对象配置,风险级别配置,扰动场景配置和执行等等 项目实现: ● 项目底层框架采用 springboot ,注册中心、配置中心选型 nacos ,采用前后端分离的模式,使用 Feign 注解内...