熟练使用python 掌握BS4 request selenium scrapy框架。能利用多线程爬虫进行数据的快速采集,能利用pandas matplotlib等进行数据分析,以及数据可视化。能利用各种模块对excel等文档表格进行快速处理并分析
熟练使用mysql技术,熟悉多表复杂的操作方法
亚马逊数据采集:
对亚马逊的数据进行采集,分析数据,以及商品评论采集,分析顾客需求,以及成交时间节点
京东天猫国美等国内电商平台数据采集,以及图片抓取,评论分析
复制整个项目开发以及部署,现已正式使用,对亚马逊商品信息,商品评论,进行采集,分析数据,并且能在线上实时提交爬取链接,进行爬取
对国内电商平台,比如PDD JD 天猫等进行数据采集,以及图片获取,分析商品价格与销售数据,进行价格区间推荐