1.熟悉各类网站数据的获取:
精通selenium ,appium,httpClient技术手段获取数据;
2.精通java主流框架:
精通 spring 全家桶;
精通持久框架,mybatis
3.精通各类数据库;
NoSql数据库, Redis mongo Elasticsearch
MYSQL数据库
4.熟悉前段开发框架
JQ,EasyUI;
以上数据,都可独立搭建环境或集群;
可独立开发网站自动化脚本,网站自动化数据获取,和其他java开发业务
工作期间主要负责各类网站的数据获取,游走在各类网站页面和网站接口之中,可以获取移动端,PC端的数据数据,只有你想得到的没有我办不到的,可以详聊
项目公开部分较少,简单说下,通过每个配置文件的不同,执行不同抓取逻辑,从而获取各大网站的指定数据,因本人还在公司就职中,无法公开更多
此项目本人从前端开发到后台数据搭建都是一人负责一人开发,此项目展示通过抓取获取的公司公告数据,将其分类并展示,使用Spring mvc + Spring + mybatis ,在数据存储使用 Elasticsearch + mysql + MongoDB 前台设计使用JQ进行开发