python程序设计、flask框架搭建web网站、scrapy、网络爬虫、echarts/pyecharts、网页部署、linux、大数据开发环境搭建、java程序设计、数据挖掘、数据可视化等...
爬取安居客、58租房信息、广州某学院教务系统、豆瓣、京东商品信息,评论信息。掌握反爬技巧。
python+flask+echarts搭建可视化系统并部署上线。
爬虫采集网络信息存储到数据库,flask搭建后端服务器,使用echarts进行数据可视化。精美UI。
通过浏览器分析数据包,分析反爬机制,使用request等库对数据进行抓取,存储到csv文件中或直接输出。