熟练运用python爬虫, js逆向 ,数据库,数据分析 等技术。对主流电商网站,淘宝、拼多多、京东,美团系,美团、大众点评,微博抖音小红书均可实现数据抓取,有丰富的数据抓取经验,能够高效、准确地获取数据
微博监控体系:
输入关键词,获取文章列表,下一步获取文章评论、点赞、转发的用户id,最后获取用户个人简介,可以做简单的用户画像和舆情分析
爬取微博话题数据,包括日期、关键词、话题名称、讨论数、阅读数、简介等,存入数据库,做简单的词频和词云
利用selenium爬取boss直聘的职位信息,包括职位名、工作地点、公司名称、工作经验、薪资、岗位要求等