精通python 大批量数据处理技术 在1小时内单机处理 50G 数据
爬虫:爬取网页,手机app 等数据 其中包含部分登陆和验证码反爬虫技术
自动化功能开发: 开发自动化报表,并每天定时定点向平台提交任务并更新到本地。
数据分析 负责公司的用户画像构建工作
有大批量数据处理的能力,负责千万-亿级别数据的本地单机处理
负责公司用户画像构建,和相应的数据分析。
公司每日自动化报表任务的定时定点提交和定点的更新到本地
爬虫,对登陆网站,app等数据进行爬取,并进行自动化登陆和验证码反爬