python后台:django,nginx,uwsgi,docker,jenkins,git,mysql,redis,mongdb等
python爬虫:requests,scrapy,ip池,消息队列以及各种反反爬措施等。
后台:类OA后台项目,电商网站,电商小程序;
爬虫:淘宝,京东,值得买,58同城,大众点评,36氪,搜狐,搜狗等网站的数据抓取。包括app抓包,模拟登录,模拟浏览等项目。
角色 | 职位 |
负责人 | 高级python工程师 |
队员 | 前端工程师 |
队员 | 后端工程师 |
希欧网官方网站:团队完成该网站后台接口功能,以及前端展示。其中包括首页,主编时间,希欧专访,创业咨询,活动会议等模块的开发。
使用scrapy框架,分布式抓取淘宝指定类目(女装,内衣,家居,女鞋等等)商品数据,包括商品名称,价格,尺码,颜色分类,宝贝详情,评论等数据。使用selenium模拟登录,使用mysql+mongodb持久化存储数据。
使用scrapy框架,分布式抓取淘宝指定类目(女装,内衣,家居,女鞋等等)商品数据,包括商品名称,价格,尺码,颜色分类,宝贝详情,评论等数据。使用selenium模拟登录,使用mysql+mongodb持久化存储数据。
【该评论为5星(满分)好评,评论人选择不公开展示】