香港科技大学的私有化大语言模型部署项目 作为核心开发人员,参与了 Nice 大语言模型的私有化部署,为垂直教育领域提供定制化的智能解答服务。负责 RAG 增强 和 LoRA 微调 全流程,从数据预处理到模型训练与优化,确保模型能够高效适应教育行业的需求。此外,我还通过 Faiss 向量数据库 实现了高效的知识检索系统,大大提升了模型的查询响应速度。通过这次项目,我深入理解了大规模语言模型的调优与部署,提升了自己的系统架构设计能力。
智能机器人控制系统开发项目中,我主导了机器人具身智能系统的研发。项目中,我参与了基于 Action Chunking Transformer 架构的深度学习模型训练,开发了机器人在物理环境中进行实时决策的能力,成功实现了 智能抓取 和 图像生成 等任务。该系统已在多个展会和客户中展示,获得了广泛好评。这个项目让我深刻理解了如何将多模态大模型应用于物理交互场景,提升了我的机器人与 AI 模型结合的开发能力。
高性能视频监控系统开发 在一家自动化科技公司,我参与开发了一个高效的视频监控系统,成功实现了 150+ 监控设备的实时监控与管理。该系统基于 Flask、Docker 和 MySQL 构建,使用 GPU 多卡调度系统 提升视频处理效率,并通过优化数据库架构,确保系统能够稳定运行。此外,我还负责了视频检测模型(如 螺栓松紧检测、端子排位置检测)的标注和训练工作。通过这个项目,我积累了高并发处理与大规模系统的开发经验。