案例介绍
本项目对全国的乡村振兴数据进行收录、计算而后产出可视化页面。
其中数据的收录途径有三个:
1.文件上传
2.api获取
3.爬虫获取。
其中我负责的爬虫获取这块。使用jsoup + htmlunit来完成爬虫工作。
为确保爬虫任务不会受到系统重启这类因素影响，所以使用redis中的set集合设计了一个简单的爬虫任务调度器。
遇到过得问题：通过hanlp和hash方法解决了数据录入之后存在区划数据缺漏问题。
责任描述：
负责接口文档编写；线上环境维护；编写爬虫进行数据采集、补全；试点示范乡村画像的后端开发工作；数据库设计；
案例图片
相似案例推荐
其他人才的相似案例推荐
-
食客
食谱小程序，用户可在上面进行查看各类食谱，并且能够上传自制食
-
DICT项目管理平台
业务背景： 中国移动 DICT 业务快速发展，但当前系统
-
智慧大屏领导看板
使用vue/echarts构建数据统计展示平台，echart
-
未来社区小程序
依据省市未来社区建设要求设计开发，协调整合已有资源，接入社区
-
未来社区
依据省市未来社区建设要求设计开发，协调整合已有资源，接入社区
-
HY-DAMS数字档案馆管理系统
根据档案馆档案工作业务特点，系统采用领域驱动设计（DDD），
-
雅昌云印
1、负责该项目的前端开发项目，维护线上商城运营 2、ech
-
艺术网
1、thinkPHP5+jq开发，主要是原生代码为主。 2
-
揭榜挂帅平台测试
该政务类项目分为 pc端以及h5端 核心功能提供了 政府
-
奈印
该项目主要是是一个订单管理的项目,其主要功能有 查看我的订单
-
广播电视总局政务平台
《广播电视设备器材入网认定管理办法》 第一章 总则
-
会看花
这个是之前做的微信小程序 打开微信搜索 会看话就行 这个
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
接收人才推送
联系需求方端客服