#程序员

如何让 AI 根据使用者意图自动化控制网页?CopilotKit,https://github.com/RecursivelyAI/CopilotKit,给出了一个较为通用的解决方案,它的思路比较简单,大致如下:

1)让 AI 结构化理解网页上的内容
2)告诉 AI 可以对网页进行哪类操作,例如点击按钮、选择元素、删除模块等
3)通过聊天窗口/语音控制等方式,告诉 AI 你期望它做什么事情

下面这个视频就演示了,如何让 AI 帮助我们选择旅行目的地,通过对话的方式完成筛选。

CopilotKit 项目作者对这类能力进行了前端程序化封装,通过 useMakeCopilotReadable 和 useMakeCopilotActionable 等函数,可以让程序快速实现 1 和 2 的操作,调用起来十分简单,几行代码就能搞定。

详细文档:https://docs.copilotkit.ai/getting-started/quickstart-chatbot

Invalid media: video
 
 
Back to Top