精通python语言,曾在某教育机构系统学习爬虫技术,包括多进程、多线程爬虫,scrapy框架,js逆向等技术,技能主要偏向于网页爬虫,同时对于redis、mogoDB、myspl等数据库有一定的使用经验,能够实现将爬取数据放入数据库等操作。
一:网易云音乐网页版,爬取歌曲评论、榜单等
二:电商平台,在淘宝、京东等网站来爬取商品信息,包括标题,价格,店铺名等信息
通过用户输入的关键字,自动爬取淘宝商品信息,包括标题、店铺名称、地点、付款人数等信息,然后将其保存到本地
通过用户输入关键字,自动从京东爬取信息,包括标题,店铺名称以及价格等信息,然后数据以csv形式保存到本地