1、三年python爬虫工作经验
2、擅长各类爬虫,web端和app端,分布式爬虫、增量式爬虫
3、技术栈:js逆向,安卓逆向,小程序逆向
4、scrapy二次开发,实现通用化,大幅提高新项目开发效率
爬虫:淘宝、天猫、淘宝直播、微博、大众点评、小红书、携程、京东、房天下、微信公众号、
逆向:小红书app、淘宝直播app、微信小程序、百度小程序、得物app等
大众点评商铺爬虫 字段:标题,电话,人均消费,综合评分,三项评分,板块,分类,行政区,商圈,评论数,详细地址,营业时间等
获取京东唯品会商品价格、型号与得物商品进行比对,两者价格差值或百分比符合指定值,则输出表格存储。可设置价格区间和销量下限等附带条件
虽然中途交付有出现一些问题,但最后都解决了。合作顺利