RPA机台带操项目

人工智能其他案例ID：250267

凯润

3 年经验· 埃克斯工业

微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

封测厂机台图像算法自动点击系统，面向无开放接口的老旧机台（贴片机、测试机、AOI、划片机等）的自动化操作场景。

许多封测厂机台仅提供本地软件界面，无法远程控制，长期依赖人工盯屏、手动点击完成参数录入、配方切换、报警确认、结果抓取等操作，效率低且易误操作。本项目用计算机视觉替代人工“看屏幕、点按钮”：

• 通过截屏或工业相机采集机台界面图像，使用 OCR 与模板匹配 / 目标检测识别按钮、图标、状态灯、文本框及弹窗；
• 根据识别结果自动定位坐标并模拟点击，结合状态判断做出操作决策（如识别到报警弹窗自动点击确认、识别到良率异常自动切换配方）；
• 支持操作日志留痕，全流程可回溯。

我在项目中负责界面元素识别算法设计、模型训练调优、点击决策逻辑开发，以及在不同分辨率与机台界面下的鲁棒性适配。

应用后，机台值守从人工转为自动，误操作率显著下降，实现 7×24 小时无人值守。

关键词：机台视觉 RPA、图像识别自动点击、封测厂机台、界面元素识别、屏幕 OCR、自动操作、工控机自动化。