python 网站开发 (flask):开发 web 后台网站, 数据展示,自动化监测,买量数据结算
python 数据爬虫: 爬取各个平台(微信公众号,穿山甲巨量,广点通,头条小游戏平台,oppo平台,vivo平台等数据)
python 分布式游戏用户数据统计
Flask, Mongo, Mysql, Redis, Celery, Selenium 等
游戏用户数据统计
游戏后台网站开发
多平台数据爬取, 爬取各个平台(微信公众号,穿山甲巨量,广点通,头条小游戏平台,oppo平台,vivo平台等数据)
由于各个游戏平台的数据都是粗粒度的数据,包括新增活跃用户数,广告收入,买量消耗等,且统计口径与公司自研后台的不一致,需要进行整合,将收入数据和消耗数据整合到后台统计数据,并细粒度到分包级别
通过 redis+celery 增量对海量用户事件日志进行分布式分析,主要是记录上次分析的日志文件偏移量,以及确认分布式任务的更新频率。