基本信息

案例ID:173049

技术顾问: - 5年经验 - 南京烽火科技

联系沟通

微信扫码,建群沟通

项目名称:非结构化处理平台

所属行业:电子商务 - B2C

->查看更多案例

案例介绍

非结构化数据分析系统,主要用于将非结构数据通过数据探测,数据分类,阵地快提,数据落地,数据入库,PDF提取,HTTP提取等方式变成结构化的阵地数据输出,并与数仓进行对接,为下游业务贡献数据
项目职责:
1.对接数据入库模块,对入库的HDFS文件进行解析,清洗,数据输出到HIVE表,并统计数据质量情况如字段有值率,总记录数等进行BI展示
2.负责两两属性模块,提取入库数据中的两两属性,如身份证-姓名,身份证-手机号,身份证-车牌号等,为束缚胶囊提供数据
3.负责shell脚本编写,hive脚本编写
4.负责对接数仓

相似案例推荐

其他人才的相似案例推荐

  • 小型购物网站开发

    小型购物网站开发

    使用HTML、js、jsp和Mysql开发了一个小型构物网站

  • 商陆微店

    商陆微店

    商陆微店是为用户在移动社交电商新时代提供优质的解决方案。

  • 电商系统

    电商系统

    实现了公众号端、微信小程序端、H5端、PC端用户账号同步,能

  • 电商系统

    电商系统

    项目是一套电商系统,包括前台商城系统及后台管理系统,基于Sp

  • 土土优选

    土土优选

    负责ios移动端开发 一个从0-1的app开发 底层框架搭建

  • 码上保

    码上保

    1. 此项目概有三个入口微信、中泰和微店,此入口是和周边系统

  • 供货数据管理系统

    供货数据管理系统

    主要经营的就是原料贸易,在上游买货,下游买货 上游买到货之

  • 欧遇商城

    欧遇商城

    主要用于义乌小商品批发商城,商城类的常用下单功能、库存、订单

  • 美试网

    美试网

    工作描述: 一、负责公司项目性能测试、安全测试、自动化测

  • 亚马逊对接系统

    亚马逊对接系统

    亚马逊店铺订单获取、发货、物流对接、用户权限、商品上传、订单

  • 亚马逊对接系统

    亚马逊对接系统

    1:获取亚马逊订单并处理 2:并且可以同步订单状态(如待发

  • 购物商城

    购物商城

    222222222222222222222222222222

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服