跳转至

WebsiteSearchTool

实验状态

WebsiteSearchTool目前处于实验阶段。我们正在积极将此工具纳入我们的产品套件中,并将相应更新文档。

描述

WebsiteSearchTool旨在作为一个概念,用于在网站内容中进行语义搜索。它旨在利用先进的机器学习模型,如检索增强生成(RAG),高效地导航和提取指定URL中的信息。此工具旨在提供灵活性,允许用户在任何网站上进行搜索,或专注于特定感兴趣的网站。请注意,WebsiteSearchTool的当前实现细节正在开发中,其功能可能与描述的有所不同,尚未完全可用。

安装

为了在WebsiteSearchTool可用时准备好您的环境,您可以安装基础包:

pip install 'crewai[tools]'

此命令安装必要的依赖项,以确保一旦工具完全集成,用户可以立即开始使用它。

示例用法

以下是如何在不同场景中使用WebsiteSearchTool的示例。请注意,这些示例是说明性的,代表了计划中的功能:

from crewai_tools import WebsiteSearchTool

# 示例:初始化工具,代理可以使用它来搜索任何发现的网站
tool = WebsiteSearchTool()

# 示例:将搜索限制在特定网站的内容中,现在代理只能在该网站内搜索
tool = WebsiteSearchTool(website='https://example.com')

参数

  • website:一个可选参数,用于指定进行针对性搜索的网站URL。此参数旨在通过允许在必要时进行针对性搜索来增强工具的灵活性。

自定义选项

默认情况下,该工具使用OpenAI进行嵌入和总结。要自定义模型,可以使用如下配置字典:

tool = WebsiteSearchTool(
    config=dict(
        llm=dict(
            provider="ollama", # 或 google, openai, anthropic, llama2, ...
            config=dict(
                model="llama2",
                # temperature=0.5,
                # top_p=1,
                # stream=true,
            ),
        ),
        embedder=dict(
            provider="google", # 或 openai, ollama, ...
            config=dict(
                model="models/embedding-001",
                task_type="retrieval_document",
                # title="Embeddings",
            ),
        ),
    )
)