上海其它兼职程序员

ID：300759

Ebdaoli

大数据开发工程师

公司信息：
上海嗨普智能

工作经验：
3年

兼职日薪：
800元/8小时

兼职时间：
可工作日远程

所在区域：
上海
浦东

技术能力

熟悉Hadoop、Hive、Spark、hbase等大数据生态圈技术，有一定的MR调优和spark调优经验。
熟悉了解flume、sqoop、azkaban、seatunnel等大数据相关组件。
熟悉Spark开发流程，对dateframe 、sparkSQL有一定的经验。
在 flink、kafka、hbase、clickhouse上有一定的经验。
熟悉Linus系统基本操作命令,及shell脚本编程
了解使用 hudi、dlink

项目经验

项目描述：通过seatunnel将数据源mysql、sftp、公众号接入数仓ods层，完成对dw层的开发，根据dw相关表进行加工提供相关view给到下游进行人群圈选，最终进行广告投放。

项目描述：dashboard主要包含：活动报告/报表，标签广场，生意看板，id资产等几个模块，具体从上游数仓中获取数据，根据相关的计算方式进行区数并计算，并将计算结果推送到后端mysql，通过MQ消息通知后端，由后端和前端渲染；人群导出主要从上游数仓取数，经过一些格式的转换后，过滤后写入回写至hdfs或者压缩成zip包上传sftp。

项目描述：原神主要是从web api通过flume分别采集订单流和发券流，落入kafka后起flink job 相关过滤、清洗、加字段等操作，分别写入hbase后，再进行两条流的Join判断核销情况，最终结果写入clickhouse。

相似人才推荐

联系需求方端客服

热门标签列表

程序员接私活程序员兼职企业外包外包案例

热门城市人才

北京兼职程序员上海兼职程序员广州兼职程序员深圳兼职程序员杭州兼职程序员成都兼职程序员天津兼职程序员重庆兼职程序员武汉兼职程序员西安兼职程序员南京兼职程序员长沙兼职程序员苏州兼职程序员厦门兼职程序员福州兼职程序员合肥兼职程序员济南兼职程序员青岛兼职程序员大连兼职程序员长春兼职程序员沈阳兼职程序员哈尔滨兼职程序员石家庄兼职程序员太原兼职程序员无锡兼职程序员南昌兼职程序员洛阳兼职程序员郑州兼职程序员南宁兼职程序员珠海兼职程序员宁波兼职程序员昆明兼职程序员东莞兼职程序员贵阳兼职程序员温州兼职程序员佛山兼职程序员中山兼职程序员海口兼职程序员常州兼职程序员兰州兼职程序员呼和浩特兼职程序员乌鲁木齐兼职程序员海外兼职程序员其他兼职程序员山东兼职程序员远程兼职程序员

热门城市职位

北京程序员招聘上海程序员招聘广州程序员招聘深圳程序员招聘杭州程序员招聘成都程序员招聘天津程序员招聘重庆程序员招聘武汉程序员招聘西安程序员招聘南京程序员招聘长沙程序员招聘苏州程序员招聘厦门程序员招聘福州程序员招聘合肥程序员招聘济南程序员招聘青岛程序员招聘大连程序员招聘长春程序员招聘沈阳程序员招聘哈尔滨程序员招聘石家庄程序员招聘太原程序员招聘无锡程序员招聘南昌程序员招聘洛阳程序员招聘郑州程序员招聘南宁程序员招聘珠海程序员招聘宁波程序员招聘昆明程序员招聘东莞程序员招聘贵阳程序员招聘温州程序员招聘佛山程序员招聘中山程序员招聘海口程序员招聘常州程序员招聘兰州程序员招聘呼和浩特程序员招聘乌鲁木齐程序员招聘海外程序员招聘其他程序员招聘山东程序员招聘远程程序员招聘

热门人才推荐

热门职位推荐

iOS工程师Android工程师前端工程师后端工程师嵌入式工程师UI设计师产品经理测试工程师运维工程师游戏工程师运营/编辑其它

找人才 | 接项目 | 招聘专员 | 京ICP备16030138号-1 | Copyright © 2015-2024 猿急送