tavily-map 是做什么的?
通过 Tavily CLI 发现并列出网站上的所有 URL,无需提取内容。当用户想要在大型网站上找到特定页面、列出所有 URL、查看站点结构、查找域名上的内容位置,或说出“映射站点”、“查找 URL for”、“有哪些页面 on”、“列出所有页面”或“站点结构”时,使用此技能。比爬取更快——仅返回 URL。当您知道站点但不知道确切页面时,此技能至关重要。可与 extract 结合用于有针对性的内容检索。
使用方法
要使用此技能,请确保已安装并配置 Tavily CLI。运行以下命令来映射网站:
tavily map <url>
例如,要映射 example.com 上的所有 URL:
tavily map https://example.com
提示示例
- “映射 https://docs.example.com 站点”
- “在 https://blog.example.com 上查找关于 API 参考的页面”
- “列出 https://example.com 上的所有页面”
- “显示 https://example.com 的站点结构”
- “在 example.com 域中查找联系页面”
与其他技能组合
此技能可与 tavily-extract 技能组合使用,以从映射到的 URL 中提取内容。例如:
- 首先映射站点以找到相关 URL:
tavily map https://docs.example.com - 然后从特定 URL 提取内容:
tavily extract https://docs.example.com/getting-started
注意事项
- 此技能仅返回 URL,不提取任何内容。要获取页面实际内容,请使用 extract 技能。
- 映射大型站点可能需要一些时间,具体取决于站点大小和服务器响应。
- 请遵守网站的
robots.txt规则和访问条款。