添加页面或爬取网站

把单个页面、整个网站,或只把你选定的页面读入智能体的知识库。

在哪里找到

知识来源 › 网站

打开此界面
网站页面:“添加网站”表单、数据源、抓取任务和网站列表

步骤

  1. 打开“知识来源 › 网站”,并选择智能体。
  2. 输入“页面 URL”,例如你的帮助页面。
  3. 只添加单个页面时,取消勾选“爬取该站点上的所有页面”,再点击“添加页面”。
  4. 要读取整个网站时,保持勾选“爬取该站点上的所有页面”,再点击“添加并抓取”。
  5. 要自行选择页面时,勾选第二个框(从首页链接中查找页面……),点击“查找页面”,勾选需要的文件夹或页面,然后点击“读取所选页面”。
  6. 可选:添加前输入“名称(可选)”。

此界面上的设置

设置项作用默认值
爬取该站点上的所有页面最多 200 个页面、180 秒;不会跟进其他站点。开启
查找页面按文件夹列出首页链接和站点地图中的页面。看起来是其他语言副本的文件夹默认不勾选。—

故障排除

“请输入以 https:// 开头的网址。”

请使用该页面的 https 网址。

“请至少选择本站的一个页面。”

点击“查找页面”后,至少勾选一个页面。

小贴士

  • 计数器会显示已选页面数,上限为 200 页。

须知

  • 成员可以查看知识来源;只有工作区管理员可以添加、修改或删除。
  • 每个组织同一时间只能进行一次爬取。

相关使用指南

免费开始 主页