在本公司主要担任数据抓取,清晰和整理的工作,每天在维护自己的爬虫项目,根据公司需要写相应的爬虫项目,数据库设计完成后将数据保存到相应的数据表并进行相应的数据管理。
使用python 利用urllib、scrapy采集数据,清洗并整理数据,利用opencv做图片抓拍前后对比,selenium自动化测试,可以使用主流数据库mysql、redis、mogodb,了解http/tcp协议
区块链各大交易所数据采集fcoin,huobi,binance,mytoken等,
摩拜单车实时数据采集并分析数据。高德地图红绿灯位置采集,主流招聘网站数据采集,各类app数据采集,bbs网站自动化测试项目,淘宝商品客户信息的采集。爱奇艺会员视频采集。企业网站采集。有逆向经验,各个租房网站数据采集,有地图采集经验,可以拿到周边信息。区块链交易所数据采集,(最近价格,k线图数据,最高交易价等)监控程序及时发送telegram消息
完成天眼查和企查查采集,解决网站的点选验证嘛和拖动验证码,列表页的采集、公司详情的采集、股权穿透图、企业新闻采集
采用flask+vue完成数据采集平台,可以采集json数据的采集,动态数据的采集,静态页面的采集。
非常耐心,基础过硬,也很抓紧时间的完成了我们的项目,好评!
做工作很有耐心,响应及时,技术好
很好,细心耐心。
速度快,态度好。
沟通顺畅,积极。
能力出众,沟通及时,合作愉快
很好 ,响应及时,技术好
非常好非常用心,非常感谢~