返回顶部
w

web-content-fetcher网页内容获取

网页内容获取工具 | 当常规爬虫被过滤时,使用替代服务获取网页内容。支持:1) r.jina.ai - 最稳定 2) markdown.new - Cloudflare 专用 3) defuddle.md - 备用方案。触发词:获取网页内容、网页转markdown、内容抓取、fetch webpage、bypass cloudflare

作者: admin | 来源: ClawHub
源自
ClawHub
版本
V 1.0.1
安全检测
已通过
8,731
下载量
免费
免费
17
收藏
概述
安装方式
版本历史

web-content-fetcher

网页内容获取工具

当常规 webfetch/websearch 无法获取内容时,使用替代服务获取网页 Markdown 格式内容。

支持的服务

优先级服务用法适用场景
1r.jina.aihttps://r.jina.ai/{url}最稳定,通用性强
2
markdown.new | https://markdown.new/{url} | Cloudflare 保护网站 | | 3 | defuddle.md | https://defuddle.md/{url} | 备用方案 |

使用方法

直接调用

当需要获取网页内容时,按顺序尝试:

  1. 1. 首先用 web_fetch 尝试获取
  2. 如果失败或被过滤,调用本工具

bash

使用 jina.ai (首选)


curl -s https://r.jina.ai/https://example.com

使用 markdown.new (Cloudflare)

curl -s https://markdown.new/https://example.com

使用 defuddle.md (备用)

curl -s https://defuddle.md/https://example.com

API 格式

bash

简单获取


fetch_webpage

指定方法

fetch_webpage --method jina|markdown|defuddle

示例

用户: 帮我获取 https://news.example.com/article/123 的内容
助手: (使用 r.jina.ai 获取)

工具脚本

本目录包含 fetch.sh 脚本,可直接调用:

bash
./fetch.sh https://example.com
./fetch.sh https://example.com jina



让网页内容获取不再受限 🌐

标签

skill ai

通过对话安装

该技能支持在以下平台通过对话安装:

OpenClaw WorkBuddy QClaw Kimi Claude

方式一:安装 SkillHub 和技能

帮我安装 SkillHub 和 web-content-fetcher-1776202887 技能

方式二:设置 SkillHub 为优先技能安装源

设置 SkillHub 为我的优先技能安装源,然后帮我安装 web-content-fetcher-1776202887 技能

通过命令行安装

skillhub install web-content-fetcher-1776202887

下载

⬇ 下载 web-content-fetcher v1.0.1(免费)

文件大小: 3.57 KB | 发布时间: 2026-4-15 11:42

v1.0.1 最新 2026-4-15 11:42
Version 1.0.1 of web-content-fetcher

- No file changes detected in this release.
- No updates to features, documentation, or scripts.
- Version bump only; functionality remains unchanged.

Archiver·手机版·闲社网·闲社论坛·羊毛社区· 多链控股集团有限公司 · 苏ICP备2025199260号-1

Powered by Discuz! X5.0   © 2024-2025 闲社网·线报更新论坛·羊毛分享社区·http://xianshe.com

p2p_official_large
返回顶部