本人对于前端网页爬虫和数据处理有3年工作经验,主要应用语言为Python语言。
本人对于图像识别,文字识别应用比较擅长。
在目前公司里主要负责日常金融数据的爬取,分析和建模。
对于静态网页和动态加载网页的反爬机制也有深入了解和实践。能够实现爬取淘宝,京东,猫眼等网站。。
一、有赞网站数据脚本:对国内的有赞电商平台商家管理后台的多样操作进行python自动化处理,将商户操作大致分为“产品批量编辑”、“店铺页面自动编辑”、“商品数据自动获取至mysql”等一系列的操作。同时也通过其他第三方平台进行数据获取,并整理成视觉化表格供于用户比较。
二、某第三方平台获取PDD商品信息,并进行比价:通过获取某宝,某东平台商品名称,然后在P*D、*DD、PD*类别的平台的商品数据获取同类商品的信息,并进行比较。该项目可以通过关键字识别或者图片识别来获得商品信息,同时该项目可应用于WEB 和HTML5 以及手机APP端的自动化操作
角色 | 职位 |
负责人 | 数据分析师 |
队员 | 前端工程师 |
队员 | 后端工程师 |
有赞网站数据脚本:对国内的有赞电商平台商家管理后台的多样操作进行python自动化处理,将商户操作大致分为“产品批量编辑”、“店铺页面自动编辑”、“商品数据自动获取至mysql”等一系列的操作。同时也通过其他第三方平台进行数据获取,并整理成视觉化表格供于用户比较。
通过获取某宝,某东平台商品名称,然后在P*D、*DD、PD*类别的平台的商品数据获取同类商品的信息,并进行比较。该项目可以通过关键字识别或者图片识别来获得商品信息,同时该项目可应用于WEB 和HTML5 以及手机APP端的自动化操作