Firecrawl - Agno

FirecrawlTools 使 Agent 能够执行网页爬取和抓取任务。

前提条件

以下示例需要 firecrawl-py 库以及可以在 Firecrawl 获取的 API 密钥。

pip install -U firecrawl-py

export FIRECRAWL_API_KEY=***

示例

以下 Agent 将从 https://finance.yahoo.com/ 抓取内容，并返回内容的摘要：

cookbook/tools/firecrawl_tools.py

from agno.agent import Agent
from agno.tools.firecrawl import FirecrawlTools

agent = Agent(tools=[FirecrawlTools(scrape=False, crawl=True)], show_tool_calls=True, markdown=True)
agent.print_response("Summarize this https://finance.yahoo.com/")

Toolkit 参数

参数	类型	默认值	描述
`api_key`	`str`	`None`	用于身份验证的可选 API 密钥。将回退到 FIRECRAWL_API_KEY 环境变量。
`formats`	`List[str]`	`None`	用于操作的可选格式列表。
`limit`	`int`	`10`	要检索的最大项目数。默认值为 10。
`poll_interval`	`int`	`30`	轮询结果之间的间隔（秒）。
`scrape`	`bool`	`True`	启用抓取功能。默认为 True。
`crawl`	`bool`	`False`	启用爬取功能。默认为 False。
`mapping`	`bool`	`False`	启用网站映射功能。
`search`	`bool`	`False`	启用网络搜索功能。
`search_params`	`Dict[str, Any]`	`None`	搜索操作的可选参数。

Toolkit 函数

函数	描述
`scrape_website`	使用 Firecrawl 抓取网站。参数包括用于指定要抓取的 URL 的 `url`。如果指定了可选格式，该函数将支持。以 JSON 格式返回抓取结果。
`crawl_website`	使用 Firecrawl 爬取网站。参数包括用于指定要爬取的 URL 的 `url`，以及用于定义要爬取的最大页面数的可选 `limit`。该函数支持可选格式，并以 JSON 格式返回爬取结果。
`map_website`	使用 Firecrawl 映射网站结构。参数包括用于指定要映射的 URL 的 `url`。以 JSON 格式返回映射结果。
`search`	使用 Firecrawl 执行网络搜索。参数包括用于搜索词的 `query` 和可选的最大结果数 `limit`。以 JSON 格式返回搜索结果。

开发者资源

查看 Tools
查看 Cookbook