ID:290126

乀奋斗灬 有团队

架构师

  • 公司信息:
  • 深信服
  • 工作经验:
  • 10年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 可工作日驻场(离职原因)
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 长沙
  • 全区

技术能力

技术层面
1、熟练掌握JAVA、python、shell等开发语言,有10年以上大型项目可开发、运维、架构、管理经验,主导过
两个以上大型项目从0到1开发(springboot、springacloud等)并搭建配套基础设施(git、maven)。
2、熟练掌握大数据组件hadoop、hbase、hive、spark、zookeep、kafka、strom、flink、es等,有10年以上大
型大数据平台开发、运维、架构、管理经验,能够基于业务场景独立设计出大型大数据处理平台。
3、熟悉数据采集技术,主导开发过大型数据采集工程,能通过验证码识别、动态代理、身份伪装、频率控制等
方式突破采集上限。
4、熟悉自然语言处理,能够通过分词、主谓宾等方式提取文章、论坛主体,并分析出中心思想、正负评价、相
关信息推荐。
管理层面
1、有30+的团队管理经验,包括绩效评估沟通、人才梯队建设、员工心理辅导等
2、有项目管理经验,通过缺陷预防、风险识别、关键问题分析、制定研发流程等方式及时消除项目过程中的障
碍,确保项目按时、按质交付。
业务层面
1、有一年半的规划经理经验,通过竞争分析、行业分析、客户分析等分析出客户痛点、产品核心场景以及核心
竞争优势,落地到产品中,并通过拜访客户、分析用户体验等方式分析出产品的差异与不足,最终不断迭代到
产品中形成闭环。
2、参与调研数字化转型方案,分析ipaas、apaas、esb等相关技术,与团队一起输出数字化转型方案,并从市
场侧论证方案可行性后落地实施。

项目经验

数据基础平台
项目描述: 统一化大数据平台,通过大数据平台的技术支撑以及灵活的大数据工具,为安全行业提供完整
易用的网络安全大数据分析能力
项目职责: 1、负责基础平台用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个基础平台的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩: 1、统一化公司大数据平台,为内部赋能
2、为国家级互网行动提供基础平台,平台稳定运行没有出现因平台导致的问题
3、为 10+个外部客户部署了大数据基础平台,涉及煤矿、教育、互联网等行业,每家集群规
模在 30+
4、平台支持一键部署、动态扩容

批流画布
项目描述: 用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中,简单配置后
形成一条工作流,点击运行后将工作流编译成 flink 程序在 hadoop 上运行,在检索中心通过 SPL
语法将入库后的数据检索并展示到界面中,所画即所得,大幅提升研发工作人员效率,降低开
发门槛
项目职责: 1、负责画布用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个批流画布的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩: 1、为公司提供统一化数据清洗、转储、数据处理业务,为内部赋能
2、目前已有最大规模支撑 1500 个客户,单客户每天进入的日志量 700w 条,单节点解析及入
库性能达到 10W+EPS
3、单节点普通关联规则(不含 like 等复杂判断)性能 6W+EPS
4、单节点纯 ES 入库性能 3W+EPS
5、80 个用户同时数据检索时间不超过 2S
6、基于存算分离的云化架构,支持平滑升级,弹性扩展
7、支持批流融合

团队情况

  • 整包服务: 微信公众号开发   微信小程序开发   DBA开发   其他开发   
角色 职位
负责人 架构师
队员 后端工程师

案例展示

  • 舆情分析

    舆情分析

    1、搭建并设计大型分布式数据采集系统,并实时采集全网数据(新闻、论坛、微博、博客等) 2、自主研发文本密集算法(用于自动提取新闻、博客主题)、文本梯度算法(用于自动提取论 坛评论、博客评论) 3、自主研发验证码识别算法(一般验证码识别准确率达到 90%以上) 4、实现各个

  • 批流画布

    批流画布

    用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中,简单配置后 形成一条工作流,点击运行后将工作流编译成 flink 程序在 hadoop 上运行,在检索中心通过 SPL 语法将入库后的数据检索并展示到界面中,所画即所得,大幅提升研发工作人员效率,降低开

  • 智能BI

    智能BI

    指用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析以实现商业价值 1、OLAP 分析:OLAP 使用户能够即时以交互方式对相关数据子集进行“切片和切块”。同时, OLAP 功能,比如向上钻取、向下钻取、或任意挖掘(跨业务维度)、透视、排序、筛选、以及

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服