有完善的开发团队,有后端Java,前端, 大数据开发,还有测试工程师。
熟练掌握 Hadoop 体系架构,熟悉 HDFS、YARN 以及 MapReduce 架构及原理; 熟练使用Hive 对数据进行预处理和分析,能够对其进行性能优化; 熟练掌握 Hbase 表结构、存储和查询,能够解决 HBase 的常见问题; 熟悉使用Zookeeper、Kafka、Flume、Sqoop 等中间件; 熟练使用 Mysql、Redis 等数据库; 熟悉 Spark 运行原理,可以使用 Spark Streaming 和 Spark Sql 组件开发实时、离线分布式计算系统; 熟悉 Spark 性能调优,如内存调优、shuffle 调优、并行度调优、数据倾斜调优等; 熟练掌握 Flink,熟悉 DataStreamAPI,Watermark; 熟悉 Java 的基础语法,熟悉python、scala等语言; 熟悉使用GA谷歌分析平台
熟练使用springcloud, doubbo等微服务开发框架。
熟练使用mysql, redis, mogoDb等数据库操作
熟练使用rabbitmq,zookeeper,等中间件
熟练使用mybatis, mybatisplus, spring, springboot等框架。
熟练使用git和docker等工具。
熟练使用springcloud的组件
熟练使用集合,数组
熟悉consul注册中心,Apollo配置中心的使用。
熟悉使用设计模式
熟悉vue, js, ajax, element等前端框架
Voghion 跨境电商APP 项目描述: 此项目是公司六月份开启,通过对海外市场及数据分析开启的海外跨境电商平台,通过对用户数据的分析 帮助运营选品策划以及营销投放。通过对数据库用户数据的拉取,进行数据分类清洗,然后放入数仓中,并制 作可视化报表,通过这些指标分析,帮助公司发掘一些高价值用户,为公司实现效益最大化 项目架构: Mysql+BigQuery+CloudFunction+CloudScheduler+GA+Pub\Sub+Appsflyer 责任描述: 负责数仓的搭建 负责数据库数据的分类清洗 负责制作Data Studio可视化报表 技术实现: 通过定时python脚本拉取数据库数据进入BQ 对BQ中的原始数据进行分类清洗,进入数仓 数仓分层,原始层、DW层用户表、商品表、订单表,DM层用户维度宽表、商品维度宽表 制作Data Studio可视化报表。不同维度分析DAU、GMV,国家营销大盘CAC、ROI,用户留存cohort表,每 日用户行为表,ABtest表,各环节跳出率转化率 关联钉钉发布小时报、日报、周报
鹏驰五金商城
内容:鹏驰五金商城是一个电商项目,目前提供了基于H5的购物网站,基于小程序的客户端。服务端基于SpringCLoud技术栈 搭建微服务群,对外提供统一的REST风格接口,实现对多端的统一支持。
微服务:
商品微服务:商品及商品分类、品牌、库存等的服务
搜索微服务:实现搜索功能
交易微服务:实现订单相关业务、实现购物车相关业务
用户服务:用户的登录注册、用户信息管理等功能
短信服务:完成各种短信的发送任务
支付服务:对接各大支付平台
授权服务:完成对用户的授权、鉴权等功能
业at:责任描述:
根据项目要求完成商品模块,用户登录模块代码编写。
技术要点:
根据表之间的关系,分析商品模块和登录模块的业务。
根据业务结合springboot和mybatisplus实现商品服务的后台业务支撑。
根据业务结合jwt实现登录模块的授权和鉴权。
运用redis,死信队列等实现清理业务。引用第三方服务如阿里云,实现图片上传,短信服务。
根据业务需求和概要设计结合springcloud等框架配置优化模块。
角色 | 职位 |
负责人 | 大数据开发 |
队员 | 产品经理 |
队员 | UI设计师 |
队员 | 前端工程师 |
队员 | 后端工程师 |