项目名称:通过selenium爬虫爬取去哪酒店信息,并写入CSV文件
项目描述:
项目介绍
对去哪网页面时,发现网页源码无需要信息,为此需要selenium进行页面数据获取,以便用户能够实现一键自动爬取。
我的职责
1,采用selenium进行发起请求。
2,通过对selenium特征进行屏蔽,防止因为被识别导致页面抓取不到产生数据不全的现象。
3,通过selenium选取所要的酒店星级,对酒店进行数据爬取
4,使用xpath进行页面解析,解析出的数据通过CSV模块存储于CSV文件中