基于计算机视觉的体测测评打分系统 2021-06 ~ 2021-07
项目总负责 天津
本项目是通过OpenCV技术以及Google开源的Mediapipe进行动作捕捉进行学生的体测测评。测评内容 包括:身高测量、仰卧起坐、立定跳远、引体向上。学生通过人脸识别或账号密码登陆或者学生卡的RFID
射频识别进入到系统中。并选择要进行的项目,在语音提示后开始测试,测试结束后自动上传数据至MyS
QL数据库中。管理系统分为PC端和网页端,网页端使用Vue2+Django进行编写。PC端通过PySide2进行
编写。可进行学生成绩的查询和搜索,同时查找到的成绩可以进行导出。
本人工作内容:
1、负责开发仰卧起坐、立定跳远、引体向上的计数算法。
2、把控开发小组内其他成员的开发进度,以及代码上传Github进行版本管理的情况。
3、负责管理端的全部工作。
4、代码部署到Jetson Nano开发版中。
运用到的知识:OpenCV、MySQL、Mediapipe、Django、PySide2
太极魔盒 2021-11 ~ 2021-12
桌面端软件开发 天津
本项目通过OpenCV技术以及OpenPose关键点检测技术进行人体姿态捕捉,通过通过余弦相似度算法进
行动作匹配,最后实现打分。整个项目分为设备端和APP端。设备开机后,通过APP扫描二维码进行绑
定。然后可以在APP中选择要进行的运动内容一键投屏到设备中。当设备开始运行后,读取摄像头数据信
息,当用户点播视频后,开始对画面进行数据分析。点播内容分为两部分,左侧为摄像头画面,右侧为点
播的视频,用户进行跟练。跟练结束后将相似度算法的结果进行核算,得到分数,自动上传至APP中进行
记录。
本人工作内容:
1、测试OpenCV、FFMpeg、VLC等不同工具在点播视频时所占用CPU性能。
2、测试Mediapipe、OpenPose、Movenet三种不同姿态检测的速度。
3、通过PySide2开发软件界面。
4、在云服务器中搭建MQTT、Minio对象存储。
5、调用RK3568开发板中NPU对模型检测进行加速
运用到的知识:OpenCV、OpenPose、MQTT、Minio、PySide2
双目视觉测量机器人 2022-02 ~ 2022-03
视觉测量算法开发、上位机软件开发 天津
项目内容:本项目应用场景为自行车工厂,对出产的自行车零件进行尺寸测量。通过标定板对双目相机进
行标定,获得相机参数。并使用Jetson Nano作为机器人上位机主控,STM32F103开发板作为机器人下
位机主控。上位机与下位机通过URAT协议进行通信。下位机通过巡迹模块在提前设定好的巡检路线行
驶。在设定好的位置停止行进,并进入测量模式,下位机传输串口指令至上位记,上位记开始对测量物进
行尺寸测量,将测量结果与标准尺寸进行对比,并得出是否符合规格。
本人工作内容:
1、双目相机的标定工作
2、双目相机测距算法的开发(误差千分之三)
3、上位机整体代码逻辑开发
运用的知识:OpenCV、双目测量、STM32
树莓智能采摘机器人系统 2023-07 ~ 2023-08
视觉算法开发 天津
项目内容:联合天津东颉科技共同研发一款树莓智能采摘机器人,综合机器视觉、 嵌入式系统、自主导航
定位、机械臂规 划、传感器与控制、云计算、智能网关 等技术和设备实现树莓的无人化采摘。 目前已经
基本完成原型机的研发和测试。
本人工作内容:
1、双目相机的标定工作
2、测距算法的开发
3、Yolox模型训练
4、Yolox模型在Nvdia开发板上的TensorRT加速
成果:与天津东颉科技成功研发一款树莓智能采摘机器人 并进入下一阶段测试
运用的知识:OpenCV、双目测量、Yolox、TensorRT
直播私域流量电商小程序 2023-04 ~ 2023-06
项目总负责 义乌
项目内容:该项目为义乌的一家直播公司开 发了一个专门承接私域流量的电商平台。目前已经完成交付。
该平台由官方提供最新的选品, 并以低价上架,以满足用户的购物需求。同时,平台还定期进行抽奖等活
动,增加用户的参与度。此外,平台 还具备分销功能,为用户提供更多的商机。
本人工作内容:
1、小程序前端代码编写,以及管理
2、软件后端框架选择,以及搭建
3、服务器中MySQL、Redis、MongoDB数据库的搭建
4、前端美工审查
成果:上线了一个义乌直播间的私域流量小程序
运用的知识:uniAPP、SpringBoot、Redis、MySQL、Nginx
湖北省食品药品安全评价中心监控系统 2023-05 ~ 2023-06