1.熟悉python爬虫和js逆向,c语言
2.熟悉使用高性能爬虫爬取数据,熟悉使用selenium等自动化工具爬取数据
3.解决了瑞数,加速乐以及极验,易盾等验证码
4.对DES,AES,RSA等加密技术,有一定了解,并进行了逆向破解
5.熟悉使用正则,xpath,pyquery进行网页数据提取
6.能解决一些封ip,封账号的问题
1.酒店领域
-能定期监控携程、飞猪、去哪儿的价格信息,并定时发送数据给客户
-能大规模抓取酒店信息,酒店周边情况,酒店评论
2.金融领域
-能解决同花顺cookie的加密参数,风控,并分析证券走势
-能解决东方财富网以及巨潮资讯等网站的风控,并抓取数据进行分析
3.跨境电商领域
-解决了temu的风控,找到了方法抓取详情页数据,并对每周更新的风控进行维护
-解决了shoope参数,抓取商品数据,并对参数进行定期维护