baize白泽明理

企业落地

电脑操作 Agent 替人点老 ERP,靠得住吗?

企业引入电脑操作 Agent 点击老旧管理软件,关键在于按风险等级划分动作权限与设置人工确认。只读查询与草稿填报可以放手执行,涉及记账、提交与主数据修改的操作需要人工授权。通过专用账号隔离与操作截图留痕,保障系统稳定运行。

白泽明理

老式米灰色主机和显示器前,一只深绿色机械臂按下键盘上发绿光的键,旁边一枚带绿环的大按钮没有被按下

电脑操作 Agent 替人操作没有开发接口的老旧企业系统,可靠性取决于权限阶梯与人工确认节点。企业采用 AI 操作电脑技术读取屏幕与点击表单,要分清查询、填报与生效的责任边界。只读查询与录入草稿可以由模型自主执行,正式提交、财务记账与主数据变更需要人工复核拍板。将操作限制在专用账号与测试环境内,配合全程截图留痕,才能控制执行风险。

一块台面上从左到右五站,用绿色箭头相连:抽屉里滑出一叠报表、草稿托盘里的空白表单夹板、透明翻盖下的绿色大按钮、上了绿色挂锁的玻璃档案箱、亮绿灯的报警灯和一台小摄像头
图:「查数导出」|「填单存草稿」|「人工过账」|「改主数据」|「报错截屏」

查数与导出:看懂老软件界面并抓出报表

老旧管理软件若缺少接口,模型通过视觉定位识别菜单树、搜索框与数据网格。程序输入物料编码或订单号点击查询,待客户端响应后读取界面文本与数值。模型把多页表格滚动截屏,解析为标准表格存到本地。权限分配的递进关系参考 Agent 权限管理怎么分级:工具权限先开哪类。

业务人员负责下达查询指令和抽查数据。只读操作不改动底层数据,属于低风险动作。业务人员在后台填好查找目标,系统把跨模块的数据抓好汇总。导完之后,业务人员抽验总金额和项目行数对不对得上。

填单存草稿:模拟键鼠录入并做格式校验

系统读取发票、送货单或申请单文本,定位输入框并填入物料代号、规格、单位与单价,模拟键盘跳格。模型对必填项、日期与字段长度执行校验,核验后点击保存草稿。单据停留在草稿状态,不生成分录,不更新台账。

模型填完表后生成一张核对清单,逐行对照原始单据和界面填入的数据,等人工复验。程序在接入真实系统之前,验证流程见 Agent 测试环境:接 CRM 前先用模拟数据?。

提交与过账:涉及真金白银的操作留给人点

单据正式生效涉及债权债务、资产增减与税务申报,属于高风险操作。模型完成草稿录入后,向制单员推送待审提示,附带界面截屏与明细。制单员核实无误后,由人工在界面点击过账或提交。

单据提交的控制权限由经办人和财务主管把持。如果系统需要模型代点提交,模型只有拿到经办人给的动态验证码或内网确认通知,才执行下一步鼠标动作。系统不能绕开人工核验自己批量过账。

改主数据:放进专用虚拟桌面受控跑

主数据录入错误会引发连锁业务混乱。借助桌面自动化批量修改时,系统运行在专用虚拟桌面中,使用受限账号登录。操作前由专员导入经审批的变更清单,模型逐笔修改并截图存盘,再调用查询核实修改结果。

主数据主管审核纸质或电子审批批文,确认同意后再给专用账号临时开通权限。批量改动完成,专员马上收回写入权限,并调取审计日志检查有没有异常改动。

遇报错弹窗:停下来截屏报警等人工排查

老旧客户端容易因为内存泄漏、连接超时或数据库死锁弹出各类非预期对话框。模型如果无法根据预设规则识别弹窗含义,不能随意点击确定或取消按钮,防止误关单据或强制退出导致数据损坏。程序在检测到异常弹窗时,保存当前全屏高清截图与操作日志,向运维人员发送告警并退出操作。

IT 运维工程师查看截屏判断故障原因。要是网络偶发卡顿,由人工在客户端退出;要是数据格式不对,工程师通知业务部门修改输入内容。操作日志和截图长期存档,方便事后审计查验。

电脑操作 Agent:常见问题

为什么不能让电脑操作 Agent 使用业务人员的个人工号登录老 ERP?

用员工个人账号登录,出了问题讲不清责任。系统要是误删了单据或者违规记账,内审没法弄清到底是员工手误,还是模型点偏了。企业应当为自动化程序申请单独的系统账号,在后台限定清楚可用模块。专用账号的每一次登录时间、网络地址与按键轨迹都要单独存档,方便查账。

老旧桌面软件界面经常卡顿或分辨率变动,如何保障识别稳定性?

要让界面识别稳定,主要做三件事:第一,在固定的专用虚拟桌面或工控机里跑,锁死屏幕分辨率、字体缩放与系统主题,不让外部环境乱变;第二,程序每点一次按钮,都等界面加载动画结束、下一个输入框亮起后再敲键盘;第三,设好单步超时等待线,超过时间没有反应就主动停下并报警,不瞎点不乱试。

制造企业现有的传统流程机器人,在什么场景下值得考虑 RPA 替换?

在涉及非结构化信息解析与复杂界面适配的场景下,可以考虑引入新方案进行 RPA 替换。传统规则机器人依赖固定的屏幕坐标或者底层的控件句柄,当老软件版本升级、弹窗布局调整或者需要处理手写扫描单据时,传统脚本容易频繁报错失效。新一代视觉识别方案能理解屏幕上的语义布局,界面小改动、分辨率变化时,比按坐标点击的脚本更不容易失效。对于纯规则、大批量且界面多年不变的稳定后台搬运任务,现有流程机器人仍然能稳定运转,企业无需盲目做全面切换。