项目名称:最新日漫抓取清洗
项目描述: 动漫信息提取,调用第三方接口,爬取需求数据,
清洗入库
项目职责:
1 使用requestpost获取数据
2 配置settings,把数据库,静态文件,模板搭建好
3 通过django搭建后端框架,编写views模块
4 对数据进行数据清洗整合入库
项目优化介绍:能够熟练使用cprofile对现有代码做数据图像化处理
环境:anaconda3 snakeviz .out
优势:能够清楚的感知任务耗时情况能够精确定位高消耗程序进行优化修改提升整体运行速度python -m cProfile -o file.out(.cprofile) file.py