网页内容获取工具 | 当常规爬虫被过滤时,使用替代服务获取网页内容。支持:1) r.jina.ai - 最稳定 2) markdown.new - Cloudflare 专用 3) defuddle.md - 备用方案。触发词:获取网页内容、网页转markdown、内容抓取、fetch webpage、bypas...
数据来源:ClawHub。 在 ClawSkills 查看
选择你使用的 Agent
方法一:命令行安装(推荐)
推荐(无需提前安装 clawhub)
npx clawhub@latest --dir ~/.claude/skills install web-content-fetcher或使用 clawhub CLI(需提前安装)
clawhub --dir ~/.claude/skills install web-content-fetcher⚠️ 需要 Node.js 18+,没有 Node?请使用下方方法二直接下载 ZIP。 安装 Node.js →
方法二:手动下载安装(无需 Node)
下载 ZIP,解压后将文件夹放到以下路径,重启 Agent 即可:
安装路径
~/.claude/skills/web-content-fetcher/💡解压后将文件夹放到上方路径,重启 Agent 即可生效
--- name: web-content-fetcher description: "网页内容获取工具 | 当常规爬虫被过滤时,使用替代服务获取网页内容。支持:1) r.jina.ai - 最稳定 2) markdown.new - Cloudflare 专用 3) defuddle.md - 备用方案。触发词:获取网页内容、网页转markdown、内容抓取、fetch webpage、bypass cloudflare" author: Boss metadata: openclaw: emoji: 🌐 tags: [web, fetch, markdown, cloudflare, bypass] ---
当常规 web_fetch/web_search 无法获取内容时,使用替代服务获取网页 Markdown 格式内容。
| 优先级 | 服务 | 用法 | 适用场景 | |--------|------|------|----------| | 1 | r.jina.ai | https://r.jina.ai/{url} | 最稳定,通用性强 | | 2 | markdown.new | https://markdown.new/{url} | Cloudflare 保护网站 | | 3 | defuddle.md | https://defuddle.md/{url} | 备用方案 |
当需要获取网页内容时,按顺序尝试:
web_fetch 尝试获取# 使用 jina.ai (首选)
curl -s "https://r.jina.ai/https://example.com"
# 使用 markdown.new (Cloudflare)
curl -s "https://markdown.new/https://example.com"
# 使用 defuddle.md (备用)
curl -s "https://defuddle.md/https://example.com"
# 简单获取
fetch_webpage <url>
# 指定方法
fetch_webpage <url> --method jina|markdown|defuddle
用户: 帮我获取 https://news.example.com/article/123 的内容
助手: (使用 r.jina.ai 获取)
本目录包含 fetch.sh 脚本,可直接调用:
./fetch.sh https://example.com
./fetch.sh https://example.com jina
---
让网页内容获取不再受限 🌐
安装 Web Content Fetcher 后,可以对 AI 说这些话来触发它
Help me get started with Web Content Fetcher
Explains what Web Content Fetcher does, walks through the setup, and runs a quick demo based on your current project
Use Web Content Fetcher to web Content Fetch Tool | Use alternative services to fetch web cont...
Invokes Web Content Fetcher with the right parameters and returns the result directly in the conversation
What can I do with Web Content Fetcher in my design & creative workflow?
Lists the top use cases for Web Content Fetcher, with example commands for each scenario
将技能文件夹放到 ~/.claude/skills/web-content-fetcher/ 目录(个人级,所有项目可用),或 .claude/skills/web-content-fetcher/(项目级)。重启 AI 客户端后,用 /web-content-fetcher 主动调用,或让 AI 根据上下文自动发现并使用。
Web Content Fetcher 支持 Claude、Cursor、OpenClaw,可与这些 AI 平台无缝集成,扩展其能力。
Web Content Fetcher 可免费安装使用。请查阅仓库了解许可证信息。
网页内容获取工具 | 当常规爬虫被过滤时,使用替代服务获取网页内容。支持:1) r.jina.ai - 最稳定 2) markdown.new - Cloudflare 专用 3) defuddle.md - 备用方案。触发词:获取网页内容、网页转markdown、内容抓取、fetch webpage、bypas...
Web Content Fetcher 属于「Design & Creative」分类,该分类的技能帮助 AI 智能体在此领域执行专业任务。
Automate my design & creative tasks using Web Content Fetcher
Identifies repetitive steps in your workflow and sets up Web Content Fetcher to handle them automatically