作为后端架构师和主要开发负责人,主导开发了一个远程代码沙盒。 使用者能够通过web页面,编写自己的函数方法,并且能做到自己提供参数立马执行,查看结果。 此外,该函数也能提供其他渠道被调用。...
SDE(Software Defined Environment) 平台的搭建。我们使用Ansible + Gitlab + Vagrant等技术搭建了一套自动化运维体系,其中应用到了DevOps理念和技术,应用和服务的运维过程由原本的手工+脚本方式成功过渡到了“本地开发+自动化构建和测试+一键部署意见回滚”模式,无论是运维变更的效率还是质量都更上一层楼,使得整个团队的运维人员都能从重复运维过程中解放出来,去做更有价值的事情,比如性能调优,问题提前判断和预防等等。 本人在国内团队担任技术leader,负责方案探索,技术交流,任务分配,生产力掌控,上下级沟通交流,日常系统开发等任务。 ...
该项目旨在打造国内比较先进的 olap 数据库。在对接外部 BI 之前首先需要搭建出同类产品如 Doris、starrocks、clikhouse 的 能力如 sql 解析流程匹配添加 ai 能力作为辅助实现 sql 优化快速查询、链路追踪 trace 及集群性能监控。 在项目中我主要完成的是对于系统自监控能力,链路追踪能力。 业绩: 1.完成系统自监控框架技术方向的确定去框架搭建。 2.将系统中性能暴露出来 trace及 metrics 指标监控。 3.集群资源包括存储计算及物理节点的管控。 4.让系统使用我的框架完成线程粒度的监控便于提升系统性能。...
1.有离线与实时任务开发经验, 可以快速熟悉业务上手开发 2.有数仓建模经验,能够根据实际情况对指定任务进行优化 3.为人稳重负责,善于沟通,对新技术的研究有着充足的热情;具有良好的团队协作能力; 4.能够严格按照公司的制度规范自己,对工作认真负责,做到工作能够日结,对业务上能够很快的学习起来、入手快 ; 5.能承受压力,勇于创新。纪律性强,工作积极配合。...
通过KAFKA以及magic-api等方式对数据进行采集,根据mysql主从同步将各项目数据汇聚,利用kettle工具对数据进行抽取、整理、计算等一系列操作,计算出特定指标数据,并配置到数据ETL系统,由执行器定时执行,最后通过magic-api对指标数据进行输出,展示到数据大屏端 负责采集、数据抽取计算指标、magic-api接口开发...
负责公司泰山项目(自动部署平台)的设计开发工作。带领1名前端以及2名后端人员进行设计开发。泰山项目是公司所有对外销售企业级产品的统一部署平台,该项目旨在覆盖公司20余款企业级产品的统一部署。通过泰山实现快捷部署,减小部署成本。缩短部署时间90%以上。 负责设计并带领团队进行研发工作。使用Golang语言、Ansible以及K8S ,Dcoker等技术实现泰山项目。现为公司对外部署的唯一工具。...