Skip to content

浏览器自动化教程:让 AI 员工帮你操作网页

让 COCO AI 员工帮你登录网站、截图、填表、抓取数据——所有浏览器能做的事,AI 都能替你做。

流程: 安装浏览器组件 → (可选)设置 VNC 远程监控 → 用自然语言下达任务 → AI 员工自动操作浏览器并汇报结果

前置条件

  • COCO AI 员工
  • 无需额外账号,组件开箱即用

浏览器自动化能做什么?

安装浏览器组件后,你可以用一句话让 AI 员工完成以下任务:

  • 登录账号:远程登录 Google 邮箱、企业后台、任意网站
  • 截图取证:对任意页面截图,发送到聊天中
  • 填写表单:自动填写并提交表单
  • 数据抓取:从网页提取结构化数据,整理成表格
  • 定时监控:定期检查某个页面的价格、状态或内容变化
  • 自动化流程:多步骤网页操作,如下单、审批、发布内容

步骤 1:安装浏览器组件

直接告诉你的 COCO AI 员工:

安装浏览器组件

或者发送以下指令:

zylos add browser

AI 员工会自动完成下载和安装,通常需要 1–2 分钟。

验证安装

安装完成后,问 AI 员工:

浏览器组件安装好了吗?

AI 员工会确认安装状态。安装成功后,就可以直接下达浏览器任务了。

💡 安装后无需重启,立即可用。


步骤 2:(可选)设置 VNC 远程监控

VNC 是一种远程桌面协议,让你可以实时"看到"AI 员工的浏览器屏幕。这在以下场景特别有用:

  • 你想观察 AI 的操作过程
  • 需要在浏览器中手动完成人机验证(如 CAPTCHA、短信验证码)
  • 想亲自登录账号,由 AI 接管后续操作

开启 VNC

告诉 AI 员工:

帮我开启 VNC 远程桌面访问

AI 员工会给你一个 网页链接 和连接密码。

连接 VNC

浏览器组件通过 noVNC 网页 提供远程桌面访问,无需安装任何客户端软件:

  1. 在浏览器中打开 AI 员工提供的 VNC 网页链接
  2. 输入连接密码
  3. 即可在网页中看到 AI 员工的实时桌面

典型用法:用 VNC 完成登录,AI 接管后续

  1. 通过 VNC 连接到 AI 员工的桌面
  2. 在浏览器中手动登录你的账号(如 Google、企业系统)
  3. 完成登录后断开 VNC
  4. 告诉 AI 员工:「我已经登录好了,接下来帮我……」
  5. AI 员工复用已登录的浏览器 session,继续完成后续任务

💡 AI 员工会保留你的登录状态,下次执行相关任务时无需重新登录。


步骤 3:下达浏览器任务

安装完成后,直接用自然语言告诉 AI 员工你要做什么。

截图

打开 https://icoco.ai 并截图发给我
截一张当前 Gmail 收件箱的图,看看有没有新邮件

登录与操作

帮我登录 Google 邮箱,检查今天有没有来自 [email protected] 的邮件,把邮件标题和时间发给我
打开我们公司的 CRM 后台,找到最新的 10 条客户记录截图给我

填写表单

打开这个链接,帮我填写表单:姓名填「张三」,邮箱填「[email protected]」,然后提交

数据抓取

打开 https://example.com/pricing,把所有套餐名称和价格整理成表格发给我
每天早上 9 点,帮我检查竞品官网的价格页面,有变化就通知我

日常使用流程

1. 下达任务

用自然语言描述你想让 AI 员工做的事,越具体越好:

帮我打开 Gmail,找到主题包含「发票」的邮件,把附件下载下来发给我

2. AI 执行并汇报

AI 员工会:

  • 自动导航到目标网页
  • 理解页面结构,找到操作元素
  • 完成点击、输入、滚动等操作
  • 截图记录关键步骤
  • 汇报结果

3. 处理异常

如果遇到登录验证、CAPTCHA 或其他需要人工干预的情况,AI 员工会主动通知你:

遇到了短信验证码,请通过 VNC 连接处理,或告诉我验证码是多少

你处理完后,AI 员工继续接管剩余操作。


常见问题

Q:AI 能登录需要双重验证(2FA)的账号吗? A:可以,但需要你配合完成验证步骤。推荐用 VNC 连接,由你手动完成 2FA 验证,之后 AI 接管。或者你也可以直接把验证码发给 AI 员工。

Q:AI 操作的浏览器和我的浏览器是同一个吗? A:不是。AI 员工在服务器上运行独立的浏览器,与你的本地浏览器相互独立。VNC 让你可以远程访问 AI 的浏览器。

Q:我在 VNC 里登录的账号,AI 之后还能用吗? A:可以。AI 员工会保留登录 session,下次执行任务时无需重新登录,除非 session 过期或被手动清除。

Q:AI 能自动定时执行浏览器任务吗? A:可以。告诉 AI 员工:「每天早上 8 点帮我检查一次……」,AI 会自动设置定时任务,按时执行。

Q:AI 操作页面会触发反爬虫机制吗? A:浏览器组件基于真实浏览器(Playwright),行为与正常用户高度一致,触发风控的概率较低。但部分平台有严格的异常检测,建议 AI 操作时保持合理的操作间隔。

Q:浏览器组件支持哪些浏览器? A:底层基于 Chromium(Chrome 内核),兼容绝大多数现代网站。

Q:安装时报错怎么办? A:告诉 AI 员工「浏览器组件安装失败,帮我排查一下」,AI 会自动诊断并修复。


了解更多:icoco.ai 联系我们:[email protected]