项目一:跨平台体感互动游戏开发
本项目是基于Kinect体感设备开发的切水果互动游戏,支持单人和双人对战模式。玩家通过自然挥动手臂即可完成切水果操作,无需任何手持控制器。项目包含经典模式(限命避炸弹)、禅模式(限时无炸弹)和街机模式(含增益道具)三种玩法。技术实现上,利用Kinect SDK采集骨骼数据,通过卡尔曼滤波平滑手部轨迹,结合加速度阈值判定有效斩击动作。我负责体感交互模块和游戏核心逻辑开发,将Kinect空间坐标精准映射至Unity世界坐标,切击识别准确率达95%,端到端响应延迟控制在80ms以内。双人模式下解决了骨骼ID交换问题,通过固定玩家编号与分屏识别区域划分确保稳定追踪。该项目验证了体感交互在休闲游戏中的可行性,为展厅互动内容提供了可复用的技术模板。
项目二:无人机产品双端联动展示系统
本项目是为无人机品牌开发的智能产品展示系统,采用双端架构——展示端运行于Windows大屏,基于Unity3D实现高精度无人机模型渲染、爆炸拆解组装动画及飞行视频播放;控制端同样基于Unity打包为Android Pad应用,负责型号列表展示与远程操控。两端通过局域网Wi-Fi经UDP Socket通信,以JSON格式封装指令协议。我主导控制端开发与双端通信协议设计,实现了设备自动发现、指令序列号确认与超时重发机制,确保指令响应成功率99%以上,切换延迟控制在250ms以内;同时参与展示端的资源动态加载优化。系统解决了传统纸质手册与静态视频讲解效率低的问题,显著提升了销售演示的专业性与说服力。
项目三:国家电网VR员工培训系统
本项目是为国家电网开发的VR沉浸式员工培训系统,旨在通过虚拟现实技术模拟电力作业环境,提升员工对变电站设备操作、安全规范及应急处置流程的掌握效率,降低实地培训的安全风险与成本。系统基于Unity3D开发,适配HTC Vive头显,涵盖设备认知、巡检操作、故障排查、应急演练等多个培训模块。我负责VR交互逻辑开发,包括双手手柄射线拾取、UI交互反馈、设备操作抓取与旋转等核心功能;同时参与场景状态管理模块,实现了培训流程的状态机控制(引导模式-自由练习-考核模式)。为解决大规模电力设备场景的渲染性能问题,采用LOD分级、遮挡剔除与纹理压缩优化,确保在VR高帧率要求下稳定运行。项目交付后应用于多个电力培训基地,培训效率较传统方式提升约40%。
项目四:三峡集团雷达互动墙
本项目是为三峡集团展厅开发的雷达互动墙系统,以展示三峡工程的建设历程、水力发电原理、生态保护成果等内容。互动墙基于激光雷达触控技术,将整面墙幕转变为大型触控界面,参观者通过手指触摸或手势滑动即可浏览图文、视频、数据可视化图表等内容。我负责雷达信号采集与多点触控算法开发,通过激光雷达扫描获取墙面触点坐标,经坐标校准与聚类算法实现精准的触摸点定位与轨迹追踪,支持同时识别多个触摸点,触控精度达厘米级。同时开发了内容管理平台,方便展厅运营人员自助更新展示素材。针对墙面光照变化和环境干扰,采用背景减除与动态阈值算法提升触控稳定性。项目交付后成为三峡集团展厅的核心互动展项之一,日均接待参观者数百人次。
项目五:CAVE沉浸式空间与展厅互动系列项目
CAVE沉浸式空间项目基于单台高性能主机,通过多屏显卡同时输出三路独立画面至左、前、右三面投影墙,构建无需穿戴VR头盔即可多人共享的沉浸式体验环境。我负责三屏独立Camera视口配置、多通道渲染同步及边缘融合处理,画面帧率稳定在60fps;同时集成Kinect手势识别与位置跟踪,支持用户自然走动触发视角变化与场景切换。针对单主机三路渲染性能瓶颈,通过降低非视口区域分辨率、启用GPU Instancing优化;投影融合带采用边缘羽化Shader解决亮度不均问题。
此外,我长期专注于展厅互动项目的全流程开发,积累了丰富的同类项目经验,包括但不限于:地面互动投影(雷达触控实现踩踏交互)、墙面多点触控(激光雷达驱动大面积触控墙)、隔空翻书(基于Kinect手势识别实现挥臂翻页)、透明屏展示柜互动(结合AR穿透显示与触摸操作)等。技术栈覆盖Kinect、多品牌激光雷达、投影融合、多屏同步、VR/AR、网络通信等多个方向,具备从技术选型、架构设计到现场部署调试的全链路落地能力。