基本信息

案例ID:185274

技术顾问:尘世风 - 8年经验 - 浩鲸智能科技有限公司

联系沟通

微信扫码,建群沟通

项目名称:网站数据采集

所属行业:企业服务 - 数据服务

->查看更多案例

案例介绍

使用feapder框架,对js逆向,获取ApiKey,历史Redis去重技术对数据进行去重,采用多线程采集数据,最后数据存放在mongodb中。

相似案例推荐

其他人才的相似案例推荐

  • 政府端App

    政府端App

    政府端App目前包含数据看板 + 食品快检两个部分,其中数据

  • 数据分析

    数据分析

    全栈开发。将用到的企业全部的系统数据库数据同步到一个数据库下

  • 业务监控平台

    业务监控平台

    该项目主要包含新增角色管理模块,用于配置角色操作权限;基础数

  • Bom处理软件

    Bom处理软件

    项目基于Python、PySide2进行开发,设计可进行位号

  • ***全域智治系统

    ***全域智治系统

    本人负责全部前端开发,此项目工作量挺大的,包括pc端和移动端

  • 筑友云APP

    筑友云APP

    项目描述: 这是一个为方便采集劳务人员信息以及查询考勤和工

  • 运营服务平台需求管理系统

    运营服务平台需求管理系统

    运营服务平台需求管理系统:( 涉及技术:springboot

  • FISync

    FISync

    ⚫ 在合合信息工作至今,使用 Go 语言和高并发 open

  • lumberjack2

    lumberjack2

    lumberjack2 是基于Golang语言开发的高性能日

  • CMS 中央监看系统

    CMS 中央监看系统

    以 H5 的形式开发中央监看管理系统,取代传统需要安装软件才

  • RCM 远程监控管理系统

    RCM 远程监控管理系统

    搭配 KVM ( keyboard, video, mous

  • 数据资产中台

    数据资产中台

    项目描述: 本项目主要围绕数据资产,结合数据业务场景,建设

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服