熟练使用LINUX操作系统,熟练使用python,目前从事爬虫工程师的工作,对scrapy框架较熟悉。爬虫项目经验丰富。django框架也有所了解,自学过vuejs,开发过web项目。有一定web项目经验
通过python的scrapy框架进行特定网站数据的持续爬取,提取需要的数据字段并存储到数据库,实现了高可靠性高效率的对目标数据进行爬取。
通过python的scrapy框架对指定网站进行数据的爬取,包括楼盘名称,楼幢,房间号,房间的销售状态,与房间相关的各种属性等,数据保存到数据库
通过python的scrapy框架对链家二手房成交数据进行爬取,对数据分析人员需要的字段进行提取,并将数据存储到数据库,官网有数据更新,爬取即可爬取到数据