1.网站数据采集:可采集美团、1688、58同城等大型网站数据(公开展示数据,非法采集不做)
2.页面解析:可对各种页面进行书记抽取
3.数据统计、分析、可视化:对采集的数据按要求进行处理、可做各种计算及图表展示
4.数据库存储:可以对海量数据进行数据库操作,可远程安装
5.数据前端界面展示:可开发啊前端数据展示功能
抓取美团各地美食详情,利用fiddler抓包工具获取美团美食接口,获得地理位置api接口,利用多线程分别多各个地方的美食进行爬取,将获得的店铺、地理位置、价格、评论等信息保存至mysql数据库,并对各地数据分析可视化展示,找出各地最受欢迎的美食种类及最受欢迎的地理位置