python,运用scrapy框架,cookies模拟登陆,随机用户代理和随机ip等,888影视网的电影排行榜,爬取名字,链接,作者等,且运用Meta链接该网页详情页获取电影评分,简介和评分信息,最后判断翻页和终止条件,还有贴吧,B站视频数据分析,
会numpy和pandas,读取Excel文件,数据操作,数据分析和可视化,运用数据建立直观可视图等。
影视网的电影排行榜,爬取名字,链接,作者等,且运用Meta链接该网页详情页获取电影评分,简介和评分信息,最后判断翻页和终止条件,还有贴吧,B站视频数据分析,猎聘招聘信息获取,腾讯新闻等,运用numpy和pandas对数据读取和增、删、涂、改、洗等,再可视化展示。
运用Python进行股票数据申请获取,后数据运算以及可视化分析,还有其他B站,猎聘,贴吧,影视网排名信息,淘宝商品信息获取等。
对888影视网视频排行榜数据批量获取,并按要求完成电源标题,链接,平分,简介等数据分开展示,数据清晰,其中加入随机用户代理和ip等,加入多线程和多进程命令,数据获取效率加倍,另外还淘宝商品以及销量信息,cookies模拟登陆,meta加入细节网页信息的展示等。
和前面数据差不多一样,numpy和pandas数据和数据列表的批量处理信息数据,实现数据的调动,增、删、改、拼接,和beautifulsoup数据查找,正则表达。mstplotlib模块数据可视化展示