浏览器自动化

通过 Knodo Browser Connector 让 AI 在 Chrome 中协助完成网页操作任务

浏览器自动化

浏览器自动化是 Knodo 的扩展能力。安装并连接 Knodo Browser Connector 后,AI 可以在您的桌面版 Chrome 中协助完成网页操作任务,例如打开网页、点击按钮、输入文字、滚动页面、按键、截图和读取页面信息。

这项能力适合交给 AI 处理那些需要在网页中反复查看、比对和操作的流程。您仍然可以随时观察浏览器中的变化,并在涉及敏感信息或高风险动作时自己接管。

适用场景

  • 网页信息整理:打开指定页面,提取页面中的关键信息,并整理为摘要或表格。
  • 后台流程演练:在业务后台中按步骤查看配置、检查页面状态或验证流程是否可达。
  • 表单和配置检查:协助查看表单字段、页面提示、配置项是否符合预期。
  • Web 应用体验检查:让 AI 访问页面、观察界面、截图并反馈页面异常。
  • 跨页面资料收集:在多个网页之间切换,汇总链接、标题、状态和内容差异。

使用前提

使用浏览器自动化前,请确认:

  • 使用桌面版 Chrome 浏览器。
  • 已登录 Knodo,并进入需要操作的工作空间。
  • 当前不是访客访问模式。访客对话中不会显示浏览器连接入口。
  • 已安装并启用 Knodo Browser Connector 扩展。
  • 需要操作的网站已经在 Chrome 中完成登录,或者您愿意在 AI 提示后手动登录。

安装与连接

  1. 打开工作空间右侧的 AI 对话区域。
  2. 在输入框工具栏中点击地球图标。
  3. 如果尚未安装扩展,按弹窗提示下载 knodo-browser-connector.zip
  4. 在 Chrome 地址栏打开 chrome://extensions/
  5. 打开右上角「开发者模式」。
  6. 将下载的 .zip 文件拖入扩展程序页面完成安装。
  7. 回到 Knodo,再次点击地球图标进行连接。
  8. 当图标提示「浏览器已连接」后,即可在对话中发起浏览器自动化任务。

如果安装完成后仍显示未连接,可以点击「已安装?点击检测」或重新点击地球图标尝试连接。

如何发起任务

连接成功后,直接在 AI 对话中描述您希望 AI 在浏览器中完成的目标。建议同时说明网址、任务目标和操作边界。

示例:

请打开 https://example.com,帮我查看首页有哪些主要导航入口,只查看不要提交任何表单。
请进入我们后台的用户列表页,检查今天新增用户数量,并整理成一句话摘要。
请打开这个页面,截图并指出页面中最明显的布局问题。
请帮我检查这个配置页面有哪些必填项为空,只报告结果,不点击保存。

为了减少误操作,涉及提交、删除、支付、发送消息、发布内容等动作时,建议在任务中明确写出「不要提交」「不要删除」「只查看」等边界。

使用建议

  • 给出明确目标:相比「帮我看看这个网站」,「打开某个页面并检查某个字段」更容易得到稳定结果。
  • 先让 AI 观察页面:复杂页面可以先要求 AI 截图或总结当前页面,再决定下一步。
  • 一次只做一个流程:长流程建议拆成多个小任务,便于您中途确认。
  • 保留人工确认:对业务数据有影响的操作,先让 AI 描述将要点击的位置和预期结果,再由您确认是否继续。
  • 及时说明限制:如果某个系统只能查看不能修改,或某些页面不能访问,请在任务开头说明。

安全与限制

浏览器自动化会操作您当前 Chrome 中的真实网页环境。请在使用时注意:

  • AI 可能访问已登录的网站,因此不要让它处理您不希望暴露给对话的页面内容。
  • 涉及密码、验证码、支付、删除、提交审批、发送外部消息等敏感操作时,请自行完成或明确要求 AI 不要执行。
  • 浏览器自动化不是脚本录制器,也不是自动化测试框架。它更适合按自然语言目标完成临时性的网页协助任务。
  • 某些网站可能限制自动化操作,AI 可能无法点击、输入或读取特定内容。
  • 同一工作空间同一时间只能执行一个浏览器自动化任务。上一个任务完成或取消后,再发起新的浏览器任务。
  • 如果目标页面被关闭、网络中断或扩展连接失效,任务可能会失败,需要重新连接后再试。

常见问题

看不到地球图标怎么办?

请确认您已经登录 Knodo,并且正在正常工作空间中使用 AI 对话。访客访问模式不会显示浏览器自动化入口。

安装扩展后仍显示未安装怎么办?

请确认扩展已在 chrome://extensions/ 中启用,然后回到 Knodo 点击「已安装?点击检测」或重新点击地球图标。如果仍无法识别,可以刷新 Knodo 页面后再试。

连接一段时间后失效怎么办?

重新点击地球图标即可尝试恢复连接。恢复后再重新发送浏览器自动化任务。

页面无法操作怎么办?

可能是页面权限、浏览器限制、网站安全策略或页面结构导致 AI 无法操作。您可以让 AI 先截图并描述当前页面,再决定是否手动处理。

提示目标页面已关闭怎么办?

目标网页可能被您手动关闭,或浏览器回收了相关页面。请重新打开目标页面,或让 AI 从网址重新开始。

需要登录的网站能操作吗?

可以,但前提是您已经在 Chrome 中登录该网站。如果页面提示未登录,请您先手动登录,再让 AI 继续。

AI 的结果需要复核吗?

需要。浏览器自动化可以提高效率,但它仍可能看错页面、漏掉内容或误解业务含义。重要结论和关键操作请人工复核。

相关文档