数据采集及数据分析入库(后端开发)
- 合作方式：
- 项目制 全国远程
- 预估日薪：
- 500
- 预估总价：
- 1500元
- 预估工时：
- 3天
- 所在区域：
- 全国远程
需求描述
数据采集及数据分析入库(后端开发)
1. 熟悉PYTHON爬虫(动态循环采集)
2. 熟悉REDIS + LUA + MYSQL 编程及应用
3. 熟悉数据清洗, 数据结构化, 算法定义(解析及计算模块)
统一循环时间, 对多条源网址( xml + json )进行关键字段采集
对采集数值做并行计算之后, 可实时调用及入库
有高并发的查询需求
与股票实时采集及计算分析相似
相似职位推荐
-
后台PHP二次开发（laravel框架）总价：800元概要：已完成的后台需要二次开发需求是 1. 富文本编辑器中增加设置行间距和首行缩进功能 2. 上传图
-
基于web的催收系统网站（PHP全栈）总价：10000元概要：第一个版本涉及权限管理，任务管理，外呼接口对接和数据统计。 第一个版本有一个PPT做的原型。 预
-
竞彩足球、竞彩篮球赛果开奖计算（PHP）总价：8000元概要：根据数据库已存的方案、比赛赛果来计算最终的中奖、未中奖、奖金计算 希望做过竞彩足球、篮球的有经
-
开发随机生成成千上万种动画图总价：5000元概要：需求：开发开发类似以太猫的成千上万种动画图形 大致介绍：在这里，我简称我需要的动画图为猴。我不管你
-
php python开发工程师总价：800元概要：修改原微信公众号爬虫，增加自动运行脚本的功能。注意：原爬虫抓取搜狗微信公众号会有弹出验证码的问题，运
-
一个javascript库开发（js+python）总价：1000元概要：已有： 1. 一个AWS提供的Mysql实例，景点数据和相关的数据已存入 需要： 1. 一个从
微信客服
需求方请加需求方端客服沟通需求，工程师请加工程师端客服浏览推送职位
需求方端客服
工程师端客服