1、有3年左右爬虫开发经验,能独立完成网站分析、加密破解、数据建模等爬虫任务
2、熟悉HTTP、HTTPS原来,理解Cookie机制,能够进行请求抓包;熟悉JavaScript,熟悉TypeScript
3、熟悉网页抓取原来机技术,熟悉基于正则表达式、XPath等网页清洗技术
4、了解主流js混淆加密方式如rs
5、能独立开发简单微服务,有滑块,数字字母验证码,文字点选破解经验
6、熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等
7、有Xposed,Frida,Andorid逆向,脱壳,破壳经验
8、熟悉常见反爬封禁策略,并具备相关的实战经验
店铺管理系统
1、项目描述:是一个完整的电商管理系统,包括前台小程序及后端管理系统。基于Spring Boot实现,使用MyBatis作为ORM层框架,采用Docker容器化部署。后台管理系统包含用户管理、商场管理、商品管理、推广管理、系统管理、统计等。前台微信小程序包含用户登录、微信支付、商城管理、商品分类管理、用户足迹、用户搜索、用户收藏、评论功能等模块。
2、工作内容:
1. 负责实施用户认证和授权机制,确保系统的安全性。处理用户的登录认证、权限验证等相关工作,防范潜在的安全威胁。
2. 查询商品详情页采 Redis 缓存,提高大量并发访问,网页的响应速度提高50%。
3. 基于maven进行开发,并利用其继承特性管理共有jar包的依赖,利用其聚合特性拆分后台管理系统 ,实现分层工程开发。
4. 采用Nginx做反向代理、以及搭建Tomcat服务器集群,方式解决前台网页高并发问题。
5. 负责开发后端API接口,与前端团队进行配合,确保接口功能的实现和联调。编写接口文档,方便前端团队集成和调用。