python django drf vue mysql redis celery 爬虫,驱动爬虫,爬过淘宝,京东,亚马逊等网站,熟练掌握python基础,已级多线程多进程概念,scrapy爬虫框架
在线旅游网站
118.190.160.126
vue+django+mysql+redis+支付宝沙箱支付+celery
本网站前端vue+后端Django+数据库mysql,都由我一人完成,总体的逻辑不是太复杂,后端采用的是Djangorestframework接口规范,在身份验证方面我采用的是JsonWebToken,来进行加密,里面还涉及了redis的使用及celery定时任务的使用
爬取过天猫,京东,亚马逊的电商网站,并且把数据保存到数据库当中,对于一般的web网站爬取信息还是有一定的把握,熟悉OSI七层模型,TCP/IP协议, http协议,6.掌握爬虫模块Requests, Requests-html, Scrapy,熟悉常用的反爬与反反爬技术