案例介绍
爬取上交所、深交所官网的股票、指数、ETF 的基本信息、行情数据等
责任描述：编写爬虫程序，设计应对反爬策略，数据清洗，分表存储，维护代理 IP池
技术手段:
1. 网页内容异步加载，需要分析 Ajax 请求，并用 Requests 抓取内容
2. 实现代理 IP池，定期检测 IP 的可用性，维护代理 IP 池的质量
3. 通过正则表达式、Xpath 等提取网页中需要的内容
4. 通过 PyMySQL 操作数据库，保存字典数据
案例图片
相似案例推荐
其他人才的相似案例推荐
-
xumsp融合短信
xumsp融合短信(vue2)
-
项目企业运营平台
一, 此平台针对项目型/方案型企业(公司)的诸多痛点提供
-
PCBA制造系统
一, 此系统用于电子制造业生产管理及跟踪， 主要包含如下
-
新能源汽车电池组装线的轻型MES系统
一, 此系统用于新能源电池pack线生产管理及跟踪， 主要
-
某某管理系统
权限验证 根据权限动态加载路由，渲染导航菜单。 主题
-
某某管理系统
权限验证 根据权限动态加载路由，渲染导航菜单。 主题
-
三方接口调用
外部文件保存、更新token，在导出数据（采用excel），
-
Incentive POE System
该项目是为微软供应商开发的激励活动申请系统。该系统发布于H5
-
两客一危监管平台
基于 部标808协议 包含 多路视频实时播放、历史视频播放、
-
昭报服务大厅登报小程序
昭报服务大厅登报小程序是用于《昭通日报》唯一指定的在线登报服
-
mes系统
mes系统开发 担任pc端前端开发，使用vue2，elem
-
CRM PC+小程序
一、CRM B端 语言 Umi+Ts+React+Antd
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
接收人才推送
联系需求方端客服