基本信息

案例ID:143603

技术顾问:宇空星雨 - 3年经验 - 深圳普云信息技术有限公司

联系沟通

微信扫码,建群沟通

项目名称:爬取各类网站

所属行业:电子商务 - B2B

->查看更多案例

案例介绍

使用Redis记录用户日志,并转存到HBase中;
2.通过装饰器布置UA检测和用户行为检测(使用Redis存储IP封禁状态);
3.使用pywin32清洗Word离线数据(约25GB),使用pandas清洗Excel离线数据(约10GB),分析获取数据做进一步使用;
4.使用Hive做用户日志清洗,使用sqoop将清洗数据转存到MySQL中,使用pyecharts做PV,UV,运营指标的展示,并对日志做关联性分析;
5.使用用户简历及日志数据,对用户做分类;
6.使用协同过滤算法(基于岗位)推荐公司招聘信息给用户。

相似案例推荐

其他人才的相似案例推荐

  • 圆圈

    圆圈

    该项目主要针对智慧园区,独立完成该项目开发,撰写技术文档,和

  • 区块链商城

    区块链商城

    此项目为webapp,含有商城功能,数字货币购买,以及该货币

  • 掌厨后台

    掌厨后台

    功能:对商城订单和平台客户的管理 角色:负责完成商城订单部

  • 掌厨

    掌厨

    功能:在线食材商城,可以通过线上下单,线下完成配送。 负责

  • 纳米系统

    纳米系统

    纳米系统分为客户端和业主端,系统又分为移动端和web端 主

  • 电子商务平台(dx)

    电子商务平台(dx)

    该项目是电商模式处于井喷时代时而研发的,主要功能类似于的淘宝

  • U.S. Trading Company

    U.S. Trading Company

    项目描述: 当前应用是针对客户仓储系统,商品浏览,大客户下单

  • 玛氏智能补货平台

    玛氏智能补货平台

    目描述:该项目是玛氏中国为其下游经销商开发的一款具有人工智能

  • 不可上传

    不可上传

  • 不可上传的

    不可上传的

  • 某游戏公司BW网站

    某游戏公司BW网站

    游戏门户网站,对接多家平台,对门户网站后台数据逻辑展示。以及

  • 汇电商

    汇电商

    负责整个浏览器插件的开发上架,已经接口数据抓取分析,以及服务

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服