- K8S 的全称为 Kubernetes。用于自动部署、扩展和管理“容器化(containerized)应用程序”的开源系统。 - 1.23.10 以前(包含)docker 1.24.0 containerd 中间件 k8s 和 docker dockers-shim - 可以理解成 K8S 是负责自动化运维管理多个容器化程序(比如 Docker)的集群,是一个生态极其丰富的容器编排框架工具。 - K8S是Google开源的容器集群管理系统,在Docker等容器技术的基础上,为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能,提高了大规模...
作为后端架构师和主要开发负责人,主导开发了一个远程代码沙盒。 使用者能够通过web页面,编写自己的函数方法,并且能做到自己提供参数立马执行,查看结果。 此外,该函数也能提供其他渠道被调用。...
SDE(Software Defined Environment) 平台的搭建。我们使用Ansible + Gitlab + Vagrant等技术搭建了一套自动化运维体系,其中应用到了DevOps理念和技术,应用和服务的运维过程由原本的手工+脚本方式成功过渡到了“本地开发+自动化构建和测试+一键部署意见回滚”模式,无论是运维变更的效率还是质量都更上一层楼,使得整个团队的运维人员都能从重复运维过程中解放出来,去做更有价值的事情,比如性能调优,问题提前判断和预防等等。 本人在国内团队担任技术leader,负责方案探索,技术交流,任务分配,生产力掌控,上下级沟通交流,日常系统开发等任务。 ...
该项目旨在打造国内比较先进的 olap 数据库。在对接外部 BI 之前首先需要搭建出同类产品如 Doris、starrocks、clikhouse 的 能力如 sql 解析流程匹配添加 ai 能力作为辅助实现 sql 优化快速查询、链路追踪 trace 及集群性能监控。 在项目中我主要完成的是对于系统自监控能力,链路追踪能力。 业绩: 1.完成系统自监控框架技术方向的确定去框架搭建。 2.将系统中性能暴露出来 trace及 metrics 指标监控。 3.集群资源包括存储计算及物理节点的管控。 4.让系统使用我的框架完成线程粒度的监控便于提升系统性能。...
1.有离线与实时任务开发经验, 可以快速熟悉业务上手开发 2.有数仓建模经验,能够根据实际情况对指定任务进行优化 3.为人稳重负责,善于沟通,对新技术的研究有着充足的热情;具有良好的团队协作能力; 4.能够严格按照公司的制度规范自己,对工作认真负责,做到工作能够日结,对业务上能够很快的学习起来、入手快 ; 5.能承受压力,勇于创新。纪律性强,工作积极配合。...
通过KAFKA以及magic-api等方式对数据进行采集,根据mysql主从同步将各项目数据汇聚,利用kettle工具对数据进行抽取、整理、计算等一系列操作,计算出特定指标数据,并配置到数据ETL系统,由执行器定时执行,最后通过magic-api对指标数据进行输出,展示到数据大屏端 负责采集、数据抽取计算指标、magic-api接口开发...