python爬虫,使用scrapy爬虫,多线程爬虫,对爬取来的数据存储到redis,mongodb,mysql数据库中,会使用beautifulsoup和xpath进行解析爬取来的数据,熟练运用反爬机制和代理ip处理反爬
python后端开发,会运用django框架进行开发,会使用flask框架进行开发
python数据处理,将数据存储到excel表中,对数据进行可视化操作
芒果头条项目前台,一个前后端不分离项目,使用django框架进行开发,类似于简化版网页今日头条
芒果头条项目后台,一个前后端分离项目,使用django框架进行开发,一个管理类项目
东宝商城项目,一个前后端分离项目,使用flask框架进行开发,一个类似于淘宝的简化版项目
1. 整个项目采用前后端完全分离的架构; 2. 基于Vue来开发前端,并且兼容各种终端平台; 3. 基于RabbitMQ采用生产者和消费者设计模式; 4. 海量小文件的存储方案采用FastDFS来实现; 5. 支持基于Elasticsearch的全文检索功能,能做到100
负责基于restful风格的后端开发,完成用户管理模块,解决多平台用户,包括QQ、微信等用户的认证问题。完成支付模块开发。了解支付宝的支付接口使用。 随着数据量和文章内容的增加,用户的全文搜索变得非常慢和卡顿。采用Elasticsearch和数据库对接,完成实时索引。在千万级别